流程

1. 检查 RHV 版本。

   1. 在 RHV 管理门户中，点右上角的 ? 帮助图表，选 About。
   2. 在打开的窗口中，记录下 RHV 软件版本。
   3. 确认 OpenShift Container Platform 版本 4.6 和您记录的 RHV 版本组合是被支持的。 RHV 上支持的 OpenShift Container Platform。

2. 检查数据中心、集群和存储。

   1. 在 RHV 管理门户中，点 Compute → Data Centers。
   2. 确认可以访问您要安装 OpenShift Container Platform 的数据中心。
   3. 点击该数据中心的名称。
   4. 在数据中心详情中，存储 标签中确认您要安装 OpenShift Container Platform 的存储域是 Active。
   5. 记录下域名以供以后使用。
   6. 确认 Free Space 至少为 230 GiB。
   7. 确认存储域满足 etcd 后端性能要求，可以使用 fio 性能基准工具来评测。
   8. 在数据中心详情中点击 Clusters 选项卡。
   9. 找到您要安装 OpenShift Container Platform 的 RHV 集群。记录集群名称，以供稍后使用。

3. 检查 RHV 主机资源。

   1. 在 RHV 管理门户中，点 Compute > Clusters。
   2. 点击要安装 OpenShift Container Platform 的集群。
   3. 在集群详情中点击 Hosts 标签页。
   4. 检查主机，确认这些主机有至少 28 个 逻辑 CPU 内核，专门 用于 OpenShift Container Platform 集群。
   5. 记录逻辑 CPU 内核数以供稍后使用。
   6. 请确认这些 CPU 内核被正确分配，在安装过程中创建的七台虚拟机中的每一台都可以有四个内核。

   7. 确认主机总共有 112 GiB 的Max free Memory for scheduling new virtual machines，以满足以下每个 OpenShift Container Platform 机器的要求：

      • bootstrap 机器需要 16 GiB
      • 三个 control plane 机器每个机器都需要 16 GiB
      • 三个计算机器每个机器都需要 16 GiB
   8. 记录下 Max free Memory for scheduling new virtual machine 的值以便稍后使用。

4. 验证安装 OpenShift Container Platform 的虚拟网络能否访问 RHV Manager 的 REST API。在这个网络的虚拟机上，使用 curl 来访问 RHV Manager 的 REST API:

   $ curl -k -u <username>@<profile>:<password> \ 1
   https://<engine-fqdn>/ovirt-engine/api 2

   1

   对于 <username>，指定具有在 RHV 上创建和管理 OpenShift Container Platform 集群的 RHV 帐户的用户名。对于 <profile>，请指定登录配置集，您可以登陆到 RHV 管理门户查看 Profile 下拉列表。对于 <password>，指定该用户的密码。

   2

   对于 <engine-fqdn>，请指定 RHV 环境的完全限定域名。

   例如：

   $ curl -k -u ocpadmin@internal:pw123 \
   https://rhv-env.virtlab.example.com/ovirt-engine/api

流程

1. 保留两个静态 IP 地址

   1. 在您要安装 OpenShift Container Platform 的网络上，标识 DHCP 租期池之外的两个静态 IP 地址。

   2. 连接到此网络中的主机，并确认每个 IP 地址都没有被使用。例如，使用地址解析协议（ARP）检查 IP 地址是否有条目：

      $ arp 10.35.1.19

      输出示例

      10.35.1.19 (10.35.1.19) -- no entry

   3. 为您的网络环境保留两个静态 IP 地址。
   4. 记录这些 IP 地址以备将来参考。

2. 为 OpenShift Container Platform REST API 创建 DNS 条目，并使用以下格式应用域名：

   api.<cluster-name>.<base-domain>   <ip-address> 1
   *.apps.<cluster-name>.<base-domain>   <ip-address> 2

   1

   对于 <cluster-name>、<base-domain>和 <ip-address>，请指定 OpenShift Container Platform API 的集群名称、基域和静态 IP 地址。

   2

   指定 Ingress 和负载均衡器的 OpenShift Container Platform 应用程序的集群名称、基域和静态 IP 地址。

   例如：

   api.my-cluster.virtlab.example.com	10.35.1.19
   *.apps.my-cluster.virtlab.example.com	10.35.1.20

流程

1. 使用这两个方法之一下载 CA 证书：

   • 进入 Manager 的网页 https://<engine-fqdn>/ovirt-engine/。然后在 下载 中点击 CA 证书 链接。

   • 运行以下命令：

     $ curl -k 'https://<engine-fqdn>/ovirt-engine/services/pki-resource?resource=ca-certificate&format=X509-PEM-CA' -o /tmp/ca.pem  1

     1

     对于 <engine-fqdn>，请指定 RHV Manager 的全限定域名，如 rhv-env.virtlab.example.com。

2. 配置 CA 文件，为 Manager 授予无根用户访问权限。将 CA 文件权限设置为 0644 （symbolic 值： -rw-r—​r--）:

   $ sudo chmod 0644 /tmp/ca.pem

3. 对于 Linux，将 CA 证书复制到服务器证书目录中。使用 -p 保留权限：

   $ sudo cp -p /tmp/ca.pem /etc/pki/ca-trust/source/anchors/ca.pem

4. 将证书添加到您操作系统的证书管理器：

   • 对于 macOS，请双击这个证书文件，并使用 Keychain Access 程序将该文件添加到 System 密钥链中。

   • 对于 Linux，更新 CA 信任：

     $ sudo update-ca-trust

     注意

     如果使用您自己的证书认证机构，请确定系统信任它。

流程

1. 如果还没有为计算机上免密码身份验证而配置的 SSH 密钥，请创建一个。例如，在使用 Linux 操作系统的计算机上运行以下命令：

   $ ssh-keygen -t ed25519 -N '' \
       -f <path>/<file_name> 1

   1

   指定新 SSH 密钥的路径和文件名，如 ~/.ssh/id_rsa。如果您已有密钥对，请确保您的公钥位于 ~/.ssh 目录中。

   运行此命令会在指定的位置生成不需要密码的 SSH 密钥。

   注意

   如果您计划在 x86_64 架构中安装使用 FIPS 验证的/Modules in Process 加密库的 OpenShift Container Platform 集群，不要创建使用 ed25519 算法的密钥。反之，创建一个使用 rsa 或 ecdsa 算法的密钥。

2. 作为后台任务启动 ssh-agent 进程：

   $ eval "$(ssh-agent -s)"

   输出示例

   Agent pid 31874

   注意

   如果您的集群采用 FIPS 模式，则只使用 FIPS 兼容算法来生成 SSH 密钥。密钥必须是 RSA 或 ECDSA。

3. 将 SSH 私钥添加到 ssh-agent：

   $ ssh-add <path>/<file_name> 1

   输出示例

   Identity added: /home/<you>/<path>/<file_name> (<computer_name>)

   1

   指定 SSH 私钥的路径和文件名，如 ~/.ssh/id_rsa

流程

1. 访问 OpenShift Cluster Manager 站点的 Infrastructure Provider 页面。如果您有红帽帐号，请使用自己的凭证登录。如果没有，请创建一个帐户。
2. 选择您的基础架构供应商。

3. 进入适用于您的安装类型的页面，下载您的操作系统的安装程序，并将文件放在要保存安装配置文件的目录中。。

   重要

   安装程序会在用来安装集群的计算机上创建若干文件。在完成集群安装后，您必须保留安装程序和安装程序所创建的文件。这两个文件都需要删除集群。

   重要

   删除安装程序创建的文件不会删除您的集群，即使集群在安装过程中失败也是如此。要删除集群，为特定云供应商完成 OpenShift Container Platform 卸载流程。

4. 提取安装程序。例如，在使用 Linux 操作系统的计算机上运行以下命令：

   $ tar xvf openshift-install-linux.tar.gz

5. 从 Red Hat OpenShift Cluster Manager 下载安装 pull secret。通过此 pull secret，您可以进行所含授权机构提供的服务的身份验证，这些服务包括为 OpenShift Container Platform 组件提供容器镜像的 Quay.io。

流程

1. 更改为包含安装程序的目录并初始化集群部署：

   $ ./openshift-install create cluster --dir <installation_directory> \ 1
       --log-level=info 2

   1

   对于 <installation_directory>，请指定用于保存安装程序所创建的文件的目录名称。

   2

   要查看不同的安装详情，请指定 warn、debug 或 error，而不要指定 info。

   重要

   指定一个空目录。一些安装信息，如 bootstrap X.509 证书，有较短的过期间隔，因此不要重复使用安装目录。如果要重复使用另一个集群安装中的个别文件，可以将其复制到您的目录中。但是，一些安装数据的文件名可能会在发行版本之间有所改变。从 OpenShift Container Platform 老版本中复制安装文件时要格外小心。

   根据安装程序提示输入相关的值。

   1. 可选： SSH Public Key，请选择无密码公钥，如 ~/.ssh/id_rsa.pub。这个密钥被用来验证与新的 OpenShift Container Platform 集群的连接。

      注意

      如果您要在生产环境中执行安装调试或灾难恢复，请指定 ssh-agent 进程需要使用的 SSH 密钥。

   2. 对于 Platform，选择 ovirt。

   3. 对于 Engine FQDN[:PORT]，请输入 RHV 环境的完全限定域名（FQDN）。

      例如：

      rhv-env.virtlab.example.com:443

   4. 安装程序会自动生成 CA 证书。对于 Would you like to use the above certificate to connect to the Manager?，输入 y 或 N。如果回答 N，则必须在不安全的模式安装 OpenShift Container Platform。

   5. 对于 Engine username，请使用以下格式输入 RHV 管理员的用户名和配置集：

      <username>@<profile> 1

      1

      对于 <username>，请指定 RHV 管理员的用户名。对于 <profile>，请指定登录配置集，您可以登陆到 RHV 管理门户查看 Profile 下拉列表。例如： admin@internal。

   6. 对于 Engine 密码，请输入 RHV 管理密码。
   7. 对于 Cluster，请选择用于安装 OpenShift Container Platform 的 RHV 集群。
   8. 对于 Storage domain，请选择安装 OpenShift Container Platform 的存储域。
   9. 对于 Network，选择可访问 RHV Manager REST API 的虚拟网络。
   10. 对于 Internal API Virtual IP，请为集群的 REST API 输入您设置的静态 IP 地址。
   11. 对于 Ingress virtual IP，请为通配符应用程序域输入您保留的静态 IP 地址。
   12. 对于 Base Domain，请输入 OpenShift Container Platform 集群的基域。如果这个群集暴露于外部世界，这必须是 DNS 基础结构可识别的有效域。例如： 输入 virtlab.example.com
   13. 对于 Cluster Name，请输入集群名称。例如： my-cluster。使用您为 OpenShift Container Platform REST API 创建的外部注册/可解析 DNS 条目的集群名称，以及应用域名。安装程序也将此名称提供给 RHV 环境中的集群。
   14. 对于 Pull Secret，请从之前下载并粘贴的 pull-secret.txt 文件中复制 pull secret。您还可以从 Red Hat OpenShift Cluster Manager 获取同一 pull secret 的副本。
   注意

   如果您在主机上配置的云供应商帐户没有足够的权限来部署集群，安装过程将会停止，并且显示缺少的权限。

   集群部署完成后，终端会显示访问集群的信息，包括指向其 Web 控制台的链接和 kubeadmin 用户的凭证。

   输出示例

   ...
   INFO Install complete!
   INFO To access the cluster as the system:admin user when using 'oc', run 'export KUBECONFIG=/home/myuser/install_dir/auth/kubeconfig'
   INFO Access the OpenShift web-console here: https://console-openshift-console.apps.mycluster.example.com
   INFO Login to the console with user: "kubeadmin", and password: "4vYBz-Ee6gm-ymBZj-Wt5AL"
   INFO Time elapsed: 36m22s

   注意

   当安装成功时，集群访问和凭证信息还会输出到 <installation_directory>/.openshift_install.log。

   重要

   • 安装程序生成的 Ignition 配置文件包含在 24 小时后过期的证书，然后在过期时进行续订。如果在更新证书前关闭集群，且集群在 24 小时后重启，集群会自动恢复过期的证书。一个例外情况是，您需要手动批准待处理的 node-bootstrapper 证书签名请求（CSR）来恢复 kubelet 证书。如需更多信息，请参阅从过期的 control plane 证书中恢复的文档。
   • 建议您在生成 12 小时后使用 Ignition 配置文件，因为集群安装后 24 小时证书从 16 小时轮转至 22 小时。通过在 12 小时内使用 Ignition 配置文件，您可以避免在安装过程中运行证书更新时避免安装失败。
   重要

   您不得删除安装程序或安装程序所创建的文件。需要这两者才能删除集群。

流程

1. 导出 kubeadmin 凭证：

   $ export KUBECONFIG=<installation_directory>/auth/kubeconfig 1

   1

   对于 <installation_directory>，请指定安装文件保存到的目录的路径。

2. 使用导出的配置，验证能否成功运行 oc 命令：

   $ oc whoami

   输出示例

   system:admin

流程

1. 在集群环境中，导出管理员的 kubeconfig 文件：

   $ export KUBECONFIG=<installation_directory>/auth/kubeconfig 1

   1

   对于 <installation_directory>，请指定安装文件保存到的目录的路径。

   kubeconfig 文件包含关于集群的信息，供 CLI 用于将客户端连接到正确集群和 API 服务器。

2. 查看部署后创建的 control plane 和计算机器：

   $ oc get nodes

3. 查看集群的版本：

   $ oc get clusterversion

4. 查看 Operator 的状态：

   $ oc get clusteroperator

5. 查看集群中的所有正在运行的 pod:

   $ oc get pods -A

流程

1. 可选： 在 Red Hat Virtualization (RHV) 管理门户中，打开 Compute → Cluster。
2. 验证安装程序是否创建了虚拟机。
3. 返回到安装程序正在运行的命令行。当安装程序完成后，它会显示登录到 OpenShift Container Platform Web 控制台的用户名和临时密码。

4. 在浏览器中，打开 OpenShift Container Platform web 控制台的 URL。URL 使用以下格式：

   console-openshift-console.apps.<clustername>.<basedomain> 1

   1

   对于 <clustername>.<baseDomain>，请指定集群名称和基域。

   例如：

   console-openshift-console.apps.my-cluster.virtlab.example.com

流程

1. 检查 RHV 版本。

   1. 在 RHV 管理门户中，点右上角的 ? 帮助图表，选 About。
   2. 在打开的窗口中，记录下 RHV 软件版本。
   3. 确认 OpenShift Container Platform 版本 4.6 和您记录的 RHV 版本组合是被支持的。 RHV 上支持的 OpenShift Container Platform。

2. 检查数据中心、集群和存储。

   1. 在 RHV 管理门户中，点 Compute → Data Centers。
   2. 确认可以访问您要安装 OpenShift Container Platform 的数据中心。
   3. 点击该数据中心的名称。
   4. 在数据中心详情中，存储 标签中确认您要安装 OpenShift Container Platform 的存储域是 Active。
   5. 记录下域名以供以后使用。
   6. 确认 Free Space 至少为 230 GiB。
   7. 确认存储域满足 etcd 后端性能要求，可以使用 fio 性能基准工具来评测。
   8. 在数据中心详情中点击 Clusters 选项卡。
   9. 找到您要安装 OpenShift Container Platform 的 RHV 集群。记录集群名称，以供稍后使用。

3. 检查 RHV 主机资源。

   1. 在 RHV 管理门户中，点 Compute > Clusters。
   2. 点击要安装 OpenShift Container Platform 的集群。
   3. 在集群详情中点击 Hosts 标签页。
   4. 检查主机，确认这些主机有至少 28 个 逻辑 CPU 内核，专门 用于 OpenShift Container Platform 集群。
   5. 记录逻辑 CPU 内核数以供稍后使用。
   6. 请确认这些 CPU 内核被正确分配，在安装过程中创建的七台虚拟机中的每一台都可以有四个内核。

   7. 确认主机总共有 112 GiB 的Max free Memory for scheduling new virtual machines，以满足以下每个 OpenShift Container Platform 机器的要求：

      • bootstrap 机器需要 16 GiB
      • 三个 control plane 机器每个机器都需要 16 GiB
      • 三个计算机器每个机器都需要 16 GiB
   8. 记录下 Max free Memory for scheduling new virtual machine 的值以便稍后使用。

4. 验证安装 OpenShift Container Platform 的虚拟网络能否访问 RHV Manager 的 REST API。在这个网络的虚拟机上，使用 curl 来访问 RHV Manager 的 REST API:

   $ curl -k -u <username>@<profile>:<password> \ 1
   https://<engine-fqdn>/ovirt-engine/api 2

   1

   对于 <username>，指定具有在 RHV 上创建和管理 OpenShift Container Platform 集群的 RHV 帐户的用户名。对于 <profile>，请指定登录配置集，您可以登陆到 RHV 管理门户查看 Profile 下拉列表。对于 <password>，指定该用户的密码。

   2

   对于 <engine-fqdn>，请指定 RHV 环境的完全限定域名。

   例如：

   $ curl -k -u ocpadmin@internal:pw123 \
   https://rhv-env.virtlab.example.com/ovirt-engine/api

流程

1. 保留两个静态 IP 地址

   1. 在您要安装 OpenShift Container Platform 的网络上，标识 DHCP 租期池之外的两个静态 IP 地址。

   2. 连接到此网络中的主机，并确认每个 IP 地址都没有被使用。例如，使用地址解析协议（ARP）检查 IP 地址是否有条目：

      $ arp 10.35.1.19

      输出示例

      10.35.1.19 (10.35.1.19) -- no entry

   3. 为您的网络环境保留两个静态 IP 地址。
   4. 记录这些 IP 地址以备将来参考。

2. 为 OpenShift Container Platform REST API 创建 DNS 条目，并使用以下格式应用域名：

   api.<cluster-name>.<base-domain>   <ip-address> 1
   *.apps.<cluster-name>.<base-domain>   <ip-address> 2

   1

   对于 <cluster-name>、<base-domain>和 <ip-address>，请指定 OpenShift Container Platform API 的集群名称、基域和静态 IP 地址。

   2

   指定 Ingress 和负载均衡器的 OpenShift Container Platform 应用程序的集群名称、基域和静态 IP 地址。

   例如：

   api.my-cluster.virtlab.example.com	10.35.1.19
   *.apps.my-cluster.virtlab.example.com	10.35.1.20

流程

1. 使用这两个方法之一下载 CA 证书：

   • 进入 Manager 的网页 https://<engine-fqdn>/ovirt-engine/。然后在 下载 中点击 CA 证书 链接。

   • 运行以下命令：

     $ curl -k 'https://<engine-fqdn>/ovirt-engine/services/pki-resource?resource=ca-certificate&format=X509-PEM-CA' -o /tmp/ca.pem  1

     1

     对于 <engine-fqdn>，请指定 RHV Manager 的全限定域名，如 rhv-env.virtlab.example.com。

2. 配置 CA 文件，为 Manager 授予无根用户访问权限。将 CA 文件权限设置为 0644 （symbolic 值： -rw-r—​r--）:

   $ sudo chmod 0644 /tmp/ca.pem

3. 对于 Linux，将 CA 证书复制到服务器证书目录中。使用 -p 保留权限：

   $ sudo cp -p /tmp/ca.pem /etc/pki/ca-trust/source/anchors/ca.pem

4. 将证书添加到您操作系统的证书管理器：

   • 对于 macOS，请双击这个证书文件，并使用 Keychain Access 程序将该文件添加到 System 密钥链中。

   • 对于 Linux，更新 CA 信任：

     $ sudo update-ca-trust

     注意

     如果使用您自己的证书认证机构，请确定系统信任它。

流程

1. 如果还没有为计算机上免密码身份验证而配置的 SSH 密钥，请创建一个。例如，在使用 Linux 操作系统的计算机上运行以下命令：

   $ ssh-keygen -t ed25519 -N '' \
       -f <path>/<file_name> 1

   1

   指定新 SSH 密钥的路径和文件名，如 ~/.ssh/id_rsa。如果您已有密钥对，请确保您的公钥位于 ~/.ssh 目录中。

   运行此命令会在指定的位置生成不需要密码的 SSH 密钥。

   注意

   如果您计划在 x86_64 架构中安装使用 FIPS 验证的/Modules in Process 加密库的 OpenShift Container Platform 集群，不要创建使用 ed25519 算法的密钥。反之，创建一个使用 rsa 或 ecdsa 算法的密钥。

2. 作为后台任务启动 ssh-agent 进程：

   $ eval "$(ssh-agent -s)"

   输出示例

   Agent pid 31874

   注意

   如果您的集群采用 FIPS 模式，则只使用 FIPS 兼容算法来生成 SSH 密钥。密钥必须是 RSA 或 ECDSA。

3. 将 SSH 私钥添加到 ssh-agent：

   $ ssh-add <path>/<file_name> 1

   输出示例

   Identity added: /home/<you>/<path>/<file_name> (<computer_name>)

   1

   指定 SSH 私钥的路径和文件名，如 ~/.ssh/id_rsa

流程

1. 访问 OpenShift Cluster Manager 站点的 Infrastructure Provider 页面。如果您有红帽帐号，请使用自己的凭证登录。如果没有，请创建一个帐户。
2. 选择您的基础架构供应商。

3. 进入适用于您的安装类型的页面，下载您的操作系统的安装程序，并将文件放在要保存安装配置文件的目录中。。

   重要

   安装程序会在用来安装集群的计算机上创建若干文件。在完成集群安装后，您必须保留安装程序和安装程序所创建的文件。这两个文件都需要删除集群。

   重要

   删除安装程序创建的文件不会删除您的集群，即使集群在安装过程中失败也是如此。要删除集群，为特定云供应商完成 OpenShift Container Platform 卸载流程。

4. 提取安装程序。例如，在使用 Linux 操作系统的计算机上运行以下命令：

   $ tar xvf openshift-install-linux.tar.gz

5. 从 Red Hat OpenShift Cluster Manager 下载安装 pull secret。通过此 pull secret，您可以进行所含授权机构提供的服务的身份验证，这些服务包括为 OpenShift Container Platform 组件提供容器镜像的 Quay.io。

流程

1. 创建 install-config.yaml 文件。

   1. 更改到包含安装程序的目录，再运行以下命令：

      $ ./openshift-install create install-config --dir <installation_directory> 1

      1

      对于 <installation_directory>，请指定用于保存安装程序所创建的文件的目录名称。

      重要

      指定一个空目录。一些安装信息，如 bootstrap X.509 证书，有较短的过期间隔，因此不要重复使用安装目录。如果要重复使用另一个集群安装中的个别文件，可以将其复制到您的目录中。但是，一些安装数据的文件名可能会在发行版本之间有所改变。从 OpenShift Container Platform 老版本中复制安装文件时要格外小心。

   2. 根据安装程序提示输入相关的值。

      1. 对于 SSH 公钥，请选择免密码公钥，如 ~/.ssh/id_rsa.pub。这个密钥被用来验证与新的 OpenShift Container Platform 集群的连接。

         注意

         如果您要在生产环境中执行安装调试或灾难恢复，请指定 ssh-agent 进程需要使用的 SSH 密钥。

      2. 对于 Platform，选择 ovirt。

      3. 对于 Enter oVirt’s API endpoint URL，使用以下格式输入 RHV API 的 URL：

         https://<engine-fqdn>/ovirt-engine/api 1

         1

         对于 <engine-fqdn>，请指定 RHV 环境的完全限定域名。

         例如：

         $ curl -k -u ocpadmin@internal:pw123 \
         https://rhv-env.virtlab.example.com/ovirt-engine/api

      4. 对于 Is the oVirt CA local?，输入 Yes，因为您已经设置了一个 CA 证书。否则，请输入 No。
      5. 对于 oVirt 的 CA bundle，如果您为前一个问题输入的是 Yes，请从 /etc/pki/ca-trust/source/anchors/ca.pem 中复制证书内容并粘贴到这里。然后按两次 Enter 键。如果您就前一个问题输入 No，则不会出现这个问题。

      6. 对于 oVirt engine username，请使用以下格式输入 RHV 管理员的用户名和配置文件：

         <username>@<profile> 1

         1

         对于 <username>，请指定 RHV 管理员的用户名。对于 <profile>，请指定登录配置集，您可以登陆到 RHV 管理门户查看 Profile 下拉列表。用户名和配置集应与以下示例相似：

         ocpadmin@internal

      7. 对于 oVirt engine password，请输入 RHV admin 密码。
      8. 对于 oVirt cluster，请选择用于安装 OpenShift Container Platform 的集群。
      9. 对于 oVirt storage domain，请选择安装 OpenShift Container Platform 的存储域。
      10. 对于 oVirt network，请选择可访问 Manager REST API 的虚拟网络。
      11. 对于 Internal API Virtual IP，请为集群的 REST API 输入您设置的静态 IP 地址。
      12. 对于 Ingress virtual IP，请为通配符应用程序域输入您保留的静态 IP 地址。
      13. 对于 Base Domain，请输入 OpenShift Container Platform 集群的基域。如果这个群集暴露于外部世界，这必须是 DNS 基础结构可识别的有效域。例如： 输入 virtlab.example.com
      14. 对于 Cluster Name，请输入集群名称。例如： my-cluster。使用您为 OpenShift Container Platform REST API 创建的外部注册/可解析 DNS 条目的集群名称，以及应用域名。安装程序也将此名称提供给 RHV 环境中的集群。
      15. 对于 Pull Secret，请从之前下载并粘贴的 pull-secret.txt 文件中复制 pull secret。您还可以从 Red Hat OpenShift Cluster Manager 获取同一 pull secret 的副本。
2. 修改 install-config.yaml 文件。您可以在安装配置参数部分中找到有关可用参数的更多信息。

3. 备份 install-config.yaml 文件，以便用于安装多个集群。

   重要

   install-config.yaml 文件会在安装过程中消耗掉。如果要重复使用此文件，必须现在备份。

流程

1. 更改为包含安装程序的目录并初始化集群部署：

   $ ./openshift-install create cluster --dir <installation_directory> \ 1
       --log-level=info 2

   1

   对于 <installation_directory>，请指定自定义 ./install-config.yaml 文件的位置。

   2

   要查看不同的安装详情，请指定 warn、debug 或 error，而不要指定 info。

   注意

   如果您在主机上配置的云供应商帐户没有足够的权限来部署集群，安装过程将会停止，并且显示缺少的权限。

   集群部署完成后，终端会显示访问集群的信息，包括指向其 Web 控制台的链接和 kubeadmin 用户的凭证。

   输出示例

   ...
   INFO Install complete!
   INFO To access the cluster as the system:admin user when using 'oc', run 'export KUBECONFIG=/home/myuser/install_dir/auth/kubeconfig'
   INFO Access the OpenShift web-console here: https://console-openshift-console.apps.mycluster.example.com
   INFO Login to the console with user: "kubeadmin", and password: "4vYBz-Ee6gm-ymBZj-Wt5AL"
   INFO Time elapsed: 36m22s

   注意

   当安装成功时，集群访问和凭证信息还会输出到 <installation_directory>/.openshift_install.log。

   重要

   • 安装程序生成的 Ignition 配置文件包含在 24 小时后过期的证书，然后在过期时进行续订。如果在更新证书前关闭集群，且集群在 24 小时后重启，集群会自动恢复过期的证书。一个例外情况是，您需要手动批准待处理的 node-bootstrapper 证书签名请求（CSR）来恢复 kubelet 证书。如需更多信息，请参阅从过期的 control plane 证书中恢复的文档。
   • 建议您在生成 12 小时后使用 Ignition 配置文件，因为集群安装后 24 小时证书从 16 小时轮转至 22 小时。通过在 12 小时内使用 Ignition 配置文件，您可以避免在安装过程中运行证书更新时避免安装失败。
   重要

   您不得删除安装程序或安装程序所创建的文件。需要这两者才能删除集群。

流程

1. 导出 kubeadmin 凭证：

   $ export KUBECONFIG=<installation_directory>/auth/kubeconfig 1

   1

   对于 <installation_directory>，请指定安装文件保存到的目录的路径。

2. 使用导出的配置，验证能否成功运行 oc 命令：

   $ oc whoami

   输出示例

   system:admin

流程

1. 在集群环境中，导出管理员的 kubeconfig 文件：

   $ export KUBECONFIG=<installation_directory>/auth/kubeconfig 1

   1

   对于 <installation_directory>，请指定安装文件保存到的目录的路径。

   kubeconfig 文件包含关于集群的信息，供 CLI 用于将客户端连接到正确集群和 API 服务器。

2. 查看部署后创建的 control plane 和计算机器：

   $ oc get nodes

3. 查看集群的版本：

   $ oc get clusterversion

4. 查看 Operator 的状态：

   $ oc get clusteroperator

5. 查看集群中的所有正在运行的 pod:

   $ oc get pods -A

流程

1. 可选： 在 Red Hat Virtualization (RHV) 管理门户中，打开 Compute → Cluster。
2. 验证安装程序是否创建了虚拟机。
3. 返回到安装程序正在运行的命令行。当安装程序完成后，它会显示登录到 OpenShift Container Platform Web 控制台的用户名和临时密码。

4. 在浏览器中，打开 OpenShift Container Platform web 控制台的 URL。URL 使用以下格式：

   console-openshift-console.apps.<clustername>.<basedomain> 1

   1

   对于 <clustername>.<baseDomain>，请指定集群名称和基域。

   例如：

   console-openshift-console.apps.my-cluster.virtlab.example.com

流程

1. 检查 RHV 版本。

   1. 在 RHV 管理门户中，点右上角的 ? 帮助图表，选 About。
   2. 在打开的窗口中，记录下 RHV 软件版本。
   3. 确认 OpenShift Container Platform 版本 4.6 和您记录的 RHV 版本组合是被支持的。 RHV 上支持的 OpenShift Container Platform。

2. 检查数据中心、集群和存储。

   1. 在 RHV 管理门户中，点 Compute → Data Centers。
   2. 确认可以访问您要安装 OpenShift Container Platform 的数据中心。
   3. 点击该数据中心的名称。
   4. 在数据中心详情中，存储 标签中确认您要安装 OpenShift Container Platform 的存储域是 Active。
   5. 记录下域名以供以后使用。
   6. 确认 Free Space 至少为 230 GiB。
   7. 确认存储域满足 etcd 后端性能要求，可以使用 fio 性能基准工具来评测。
   8. 在数据中心详情中点击 Clusters 选项卡。
   9. 找到您要安装 OpenShift Container Platform 的 RHV 集群。记录集群名称，以供稍后使用。

3. 检查 RHV 主机资源。

   1. 在 RHV 管理门户中，点 Compute > Clusters。
   2. 点击要安装 OpenShift Container Platform 的集群。
   3. 在集群详情中点击 Hosts 标签页。
   4. 检查主机，确认这些主机有至少 28 个 逻辑 CPU 内核，专门 用于 OpenShift Container Platform 集群。
   5. 记录逻辑 CPU 内核数以供稍后使用。
   6. 请确认这些 CPU 内核被正确分配，在安装过程中创建的七台虚拟机中的每一台都可以有四个内核。

   7. 确认主机总共有 112 GiB 的Max free Memory for scheduling new virtual machines，以满足以下每个 OpenShift Container Platform 机器的要求：

      • bootstrap 机器需要 16 GiB
      • 三个 control plane 机器每个机器都需要 16 GiB
      • 三个计算机器每个机器都需要 16 GiB
   8. 记录下 Max free Memory for scheduling new virtual machine 的值以便稍后使用。

4. 验证安装 OpenShift Container Platform 的虚拟网络能否访问 RHV Manager 的 REST API。在这个网络的虚拟机上，使用 curl 来访问 RHV Manager 的 REST API:

   $ curl -k -u <username>@<profile>:<password> \ 1
   https://<engine-fqdn>/ovirt-engine/api 2

   1

   对于 <username>，指定具有在 RHV 上创建和管理 OpenShift Container Platform 集群的 RHV 帐户的用户名。对于 <profile>，请指定登录配置集，您可以登陆到 RHV 管理门户查看 Profile 下拉列表。对于 <password>，指定该用户的密码。

   2

   对于 <engine-fqdn>，请指定 RHV 环境的完全限定域名。

   例如：

   $ curl -k -u ocpadmin@internal:pw123 \
   https://rhv-env.virtlab.example.com/ovirt-engine/api

1. API 负载均衡器：提供一个通用端点，供用户（包括人和机器）与平台交互和配置。配置以下条件：

   • 只适用于第 4 层负载均衡。这可被称为 Raw TCP、SSL Passthrough 或者 SSL 桥接模式。如果使用 SSL Bridge 模式，必须为 API 路由启用 Server Name Indication（SNI）。
   • 无状态负载平衡算法。这些选项根据负载均衡器的实现而有所不同。
   重要

   不要为 API 负载均衡器配置会话持久性。

   在负载均衡器的前端和后台配置以下端口：

   表 1.9. API 负载均衡器

   端口	后端机器（池成员）	内部	外部	描述
   6443	Bootstrap 和 control plane.bootstrap 机器初始化集群 control plane 后，您要从负载均衡器中删除 bootstrap 机器。您必须为 API 服务器健康检查探测配置 /readyz 端点。	X	X	Kubernetes API 服务器
   22623	Bootstrap 和 control plane.bootstrap 机器初始化集群 control plane 后，您要从负载均衡器中删除 bootstrap 机器。	X		机器配置服务器

   注意

   负载均衡器必须配置为，从 API 服务器关闭 /readyz 端点到从池中删除 API 服务器实例时最多需要 30 秒。在 /readyz 返回错误或处于健康状态后的时间范围内，端点必须被删除或添加。每 5 秒或 10 秒探测一次，有两个成功请求处于健康状态，三个成为不健康的请求经过测试。

2. 应用程序入口负载均衡器:提供来自集群外部的应用程序流量流量的 Ingress 点。配置以下条件：

   • 只适用于第 4 层负载均衡。这可被称为 Raw TCP、SSL Passthrough 或者 SSL 桥接模式。如果使用 SSL Bridge 模式，您必须为 Ingress 路由启用Server Name Indication（SNI）。
   • 建议根据可用选项以及平台上托管的应用程序类型，使用基于连接的或者基于会话的持久性。

   在负载均衡器的前端和后台配置以下端口：

   表 1.10. 应用程序入口负载均衡器

   端口	后端机器（池成员）	内部	外部	描述
   443	默认运行入口路由器 Pod、计算或 worker 的机器。	X	X	HTTPS 流量
   80	默认运行入口路由器 Pod、计算或 worker 的机器。	X	X	HTTP 流量

流程

1. 更新或安装 Python3 和 Ansible。例如：

   # dnf update python3 ansible

2. 安装 python3-ovirt-engine-sdk4 软件包 来获取 Python 软件开发组件。

3. 安装 ovirt.image-template Ansible 角色。在 RHV Manager 和其他 Red Hat Enterprise Linux (RHEL) 机器上，这个角色作为 ovirt-ansible-image-template 软件包发布。例如，输入：

   # dnf install ovirt-ansible-image-template

4. 安装 ovirt.vm-infra Ansible 角色。在 RHV Manager 和其他 RHEL 机器上，此角色作为 ovirt-ansible-vm-infra 软件包发布。

   # dnf install ovirt-ansible-vm-infra

5. 创建环境变量并为其分配绝对或相对路径。例如，输入：

   $ export ASSETS_DIR=./wrk

   注意

   安装程序使用这个变量创建保存重要安装相关文件的目录。之后，安装过程会重复使用此变量来定位这些资产文件。避免删除这个资产目录 ; 卸载集群时需要此目录。

流程

1. 使用这两个方法之一下载 CA 证书：

   • 进入 Manager 的网页 https://<engine-fqdn>/ovirt-engine/。然后在 下载 中点击 CA 证书 链接。

   • 运行以下命令：

     $ curl -k 'https://<engine-fqdn>/ovirt-engine/services/pki-resource?resource=ca-certificate&format=X509-PEM-CA' -o /tmp/ca.pem  1

     1

     对于 <engine-fqdn>，请指定 RHV Manager 的全限定域名，如 rhv-env.virtlab.example.com。

2. 配置 CA 文件，为 Manager 授予无根用户访问权限。将 CA 文件权限设置为 0644 （symbolic 值： -rw-r—​r--）:

   $ sudo chmod 0644 /tmp/ca.pem

3. 对于 Linux，将 CA 证书复制到服务器证书目录中。使用 -p 保留权限：

   $ sudo cp -p /tmp/ca.pem /etc/pki/ca-trust/source/anchors/ca.pem

4. 将证书添加到您操作系统的证书管理器：

   • 对于 macOS，请双击这个证书文件，并使用 Keychain Access 程序将该文件添加到 System 密钥链中。

   • 对于 Linux，更新 CA 信任：

     $ sudo update-ca-trust

     注意

     如果使用您自己的证书认证机构，请确定系统信任它。

流程

1. 如果还没有为计算机上免密码身份验证而配置的 SSH 密钥，请创建一个。例如，在使用 Linux 操作系统的计算机上运行以下命令：

   $ ssh-keygen -t ed25519 -N '' \
       -f <path>/<file_name> 1

   1

   指定新 SSH 密钥的路径和文件名，如 ~/.ssh/id_rsa。如果您已有密钥对，请确保您的公钥位于 ~/.ssh 目录中。

   运行此命令会在指定的位置生成不需要密码的 SSH 密钥。

   注意

   如果您计划在 x86_64 架构中安装使用 FIPS 验证的/Modules in Process 加密库的 OpenShift Container Platform 集群，不要创建使用 ed25519 算法的密钥。反之，创建一个使用 rsa 或 ecdsa 算法的密钥。

2. 作为后台任务启动 ssh-agent 进程：

   $ eval "$(ssh-agent -s)"

   输出示例

   Agent pid 31874

   注意

   如果您的集群采用 FIPS 模式，则只使用 FIPS 兼容算法来生成 SSH 密钥。密钥必须是 RSA 或 ECDSA。

3. 将 SSH 私钥添加到 ssh-agent：

   $ ssh-add <path>/<file_name> 1

   输出示例

   Identity added: /home/<you>/<path>/<file_name> (<computer_name>)

   1

   指定 SSH 私钥的路径和文件名，如 ~/.ssh/id_rsa

流程

1. 访问 OpenShift Cluster Manager 站点的 Infrastructure Provider 页面。如果您有红帽帐号，请使用自己的凭证登录。如果没有，请创建一个帐户。
2. 选择您的基础架构供应商。

3. 进入适用于您的安装类型的页面，下载您的操作系统的安装程序，并将文件放在要保存安装配置文件的目录中。。

   重要

   安装程序会在用来安装集群的计算机上创建若干文件。在完成集群安装后，您必须保留安装程序和安装程序所创建的文件。这两个文件都需要删除集群。

   重要

   删除安装程序创建的文件不会删除您的集群，即使集群在安装过程中失败也是如此。要删除集群，为特定云供应商完成 OpenShift Container Platform 卸载流程。

4. 提取安装程序。例如，在使用 Linux 操作系统的计算机上运行以下命令：

   $ tar xvf openshift-install-linux.tar.gz

5. 从 Red Hat OpenShift Cluster Manager 下载安装 pull secret。通过此 pull secret，您可以进行所含授权机构提供的服务的身份验证，这些服务包括为 OpenShift Container Platform 组件提供容器镜像的 Quay.io。

流程

1. 找到您要安装的 OpenShift Container Platform 版本的 RHCOS 镜像下载页面，如 /pub/openshift-v4/dependencies/rhcos/latest/latest。
2. 在该下载页面中复制 OpenStack qcow2 镜像的 URL，如 https://mirror.openshift.com/pub/openshift-v4/dependencies/rhcos/4.6/latest/rhcos-openstack.x86_64.qcow2.gz。

3. 编辑之前下载的 inventory.yml playbook。此时会粘贴 URL 作为 image_url 的值。例如：

   rhcos:
     "https://mirror.openshift.com/pub/openshift-v4/dependencies/rhcos/4.6/latest/rhcos-openstack.x86_64.qcow2.gz"

流程

1. 运行安装程序：

   $ openshift-install create install-config --dir $ASSETS_DIR

2. 根据安装程序的提示输入您系统的信息。

   输出示例

   ? SSH Public Key /home/user/.ssh/id_dsa.pub
   ? Platform <ovirt>
   ? Engine FQDN[:PORT] [? for help] <engine.fqdn>
   ? Enter ovirt-engine username <ocpadmin@internal>
   ? Enter password <******>
   ? oVirt cluster <cluster>
   ? oVirt storage <storage>
   ? oVirt network <net>
   ? Internal API virtual IP <172.16.0.252>
   ? Ingress virtual IP <172.16.0.251>
   ? Base Domain <example.org>
   ? Cluster Name <ocp4>
   ? Pull Secret [? for help] <********>

流程

1. 将计算节点数量设置为零副本：

   $ python3 -c 'import os, yaml
   path = "%s/install-config.yaml" % os.environ["ASSETS_DIR"]
   conf = yaml.safe_load(open(path))
   conf["compute"][0]["replicas"] = 0
   open(path, "w").write(yaml.dump(conf, default_flow_style=False))'

2. 设置机器网络的 IP 范围。例如，要将范围设置为 172.16.0.0/16，请输入：

   $ python3 -c 'import os, yaml
   path = "%s/install-config.yaml" % os.environ["ASSETS_DIR"]
   conf = yaml.safe_load(open(path))
   conf["networking"]["machineNetwork"][0]["cidr"] = "172.16.0.0/16"
   open(path, "w").write(yaml.dump(conf, default_flow_style=False))'

3. 删除 ovirt 部分，把平台改为 none:

   $ python3 -c 'import os, yaml
   path = "%s/install-config.yaml" % os.environ["ASSETS_DIR"]
   conf = yaml.safe_load(open(path))
   platform = conf["platform"]
   del platform["ovirt"]
   platform["none"] = {}
   open(path, "w").write(yaml.dump(conf, default_flow_style=False))'

流程

1. 可选：创建 install-config.yaml 文件的备份副本：

   $ cp install-config.yaml install-config.yaml.backup

2. 在资产目录中生成一组清单：

   $ openshift-install create manifests --dir $ASSETS_DIR

   该命令显示以下信息。

   输出示例

   INFO Consuming Install Config from target directory
   WARNING Making control-plane schedulable by setting MastersSchedulable to true for Scheduler cluster settings

   该命令生成以下清单文件：

   输出示例

   $ tree
   .
   └── wrk
       ├── manifests
       │   ├── 04-openshift-machine-config-operator.yaml
       │   ├── cluster-config.yaml
       │   ├── cluster-dns-02-config.yml
       │   ├── cluster-infrastructure-02-config.yml
       │   ├── cluster-ingress-02-config.yml
       │   ├── cluster-network-01-crd.yml
       │   ├── cluster-network-02-config.yml
       │   ├── cluster-proxy-01-config.yaml
       │   ├── cluster-scheduler-02-config.yml
       │   ├── cvo-overrides.yaml
       │   ├── etcd-ca-bundle-configmap.yaml
       │   ├── etcd-client-secret.yaml
       │   ├── etcd-host-service-endpoints.yaml
       │   ├── etcd-host-service.yaml
       │   ├── etcd-metric-client-secret.yaml
       │   ├── etcd-metric-serving-ca-configmap.yaml
       │   ├── etcd-metric-signer-secret.yaml
       │   ├── etcd-namespace.yaml
       │   ├── etcd-service.yaml
       │   ├── etcd-serving-ca-configmap.yaml
       │   ├── etcd-signer-secret.yaml
       │   ├── kube-cloud-config.yaml
       │   ├── kube-system-configmap-root-ca.yaml
       │   ├── machine-config-server-tls-secret.yaml
       │   └── openshift-config-secret-pull-secret.yaml
       └── openshift
           ├── 99_kubeadmin-password-secret.yaml
           ├── 99_openshift-cluster-api_master-user-data-secret.yaml
           ├── 99_openshift-cluster-api_worker-user-data-secret.yaml
           ├── 99_openshift-machineconfig_99-master-ssh.yaml
           ├── 99_openshift-machineconfig_99-worker-ssh.yaml
           └── openshift-install-manifests.yaml

流程

1. 要使 control-plane 节点不可调度，请输入：

   $ python3 -c 'import os, yaml
   path = "%s/manifests/cluster-scheduler-02-config.yml" % os.environ["ASSETS_DIR"]
   data = yaml.safe_load(open(path))
   data["spec"]["mastersSchedulable"] = False
   open(path, "w").write(yaml.dump(data, default_flow_style=False))'

流程

1. 要构建 Ignition 文件，请输入：

   $ openshift-install create ignition-configs --dir $ASSETS_DIR

   输出示例

   $ tree
   .
   └── wrk
       ├── auth
       │   ├── kubeadmin-password
       │   └── kubeconfig
       ├── bootstrap.ign
       ├── master.ign
       ├── metadata.json
       └── worker.ign

流程

1. 在 inventory.yml 中，在 control_plane 和 compute 变量下，将 type: high_performance 的两个实例更改为 type: server。

2. 可选： 如果您计划在同一集群上执行多个安装，请为每个 OCP 安装创建不同的模板。在 inventory.yml 文件中，使用 infraID 预先填充 模板 值。例如：

     control_plane:
       cluster: "{{ ovirt_cluster }}"
       memory: 16GiB
       sockets: 4
       cores: 1
       template: "{{ metadata.infraID }}-rhcos_tpl"
       operating_system: "rhcos_x64"
       ...

3. 创建模板和虚拟机：

   $ ansible-playbook -i inventory.yml create-templates-and-vms.yml

流程

1. 创建 bootstrap 机器：

   $ ansible-playbook -i inventory.yml bootstrap.yml

2. 使用管理入口或 SSH 中的控制台连接到 bootstrap 机器。将 <bootstrap_ip> 替换为 bootstrap 节点的 IP 地址。要使用 SSH，请输入：

   $ ssh core@<boostrap.ip>

3. 从 bootstrap 节点收集发行镜像服务的 bootkube.service journald 单元日志：

   [core@ocp4-lk6b4-bootstrap ~]$ journalctl -b -f -u release-image.service -u bootkube.service

   注意

   bootstrap 节点上的 bootkube.service 日志会输出 etcd connection refused 错误，这表示 bootstrap 服务器无法在 control plane 节点（也称为 master 节点）上连接到 etcd。在各个 control plane 节点上启动 etcd 且节点已加入集群后，这个错误应该会停止。

流程

1. 创建 control plane 节点：

   $ ansible-playbook -i inventory.yml masters.yml

2. 在 playbook 创建 control plane 时，监控 bootstrap 过程：

   $ openshift-install wait-for bootstrap-complete --dir $ASSETS_DIR

   输出示例

   INFO API v1.18.3+b74c5ed up
   INFO Waiting up to 40m0s for bootstrapping to complete...

3. 当 control plane 节点上所有 pod 都启动并运行 etcd 时，安装程序会显示以下输出。

   输出示例

   INFO It is now safe to remove the bootstrap resources

流程

1. 在集群环境中，导出管理员的 kubeconfig 文件：

   $ export KUBECONFIG=$ASSETS_DIR/auth/kubeconfig

   kubeconfig 文件包含关于集群的信息，供 CLI 用于将客户端连接到正确集群和 API 服务器。

2. 查看部署后创建的 control plane 和计算机器：

   $ oc get nodes

3. 查看集群的版本：

   $ oc get clusterversion

4. 查看 Operator 的状态：

   $ oc get clusteroperator

5. 查看集群中的所有正在运行的 pod:

   $ oc get pods -A

流程

1. 要从集群中删除 bootstrap 机器，请输入：

   $ ansible-playbook -i inventory.yml retire-bootstrap.yml

2. 从负载均衡器指令中删除 bootstrap 机器的设置。

流程

1. 创建 worker 节点：

   $ ansible-playbook -i inventory.yml workers.yml

2. 要列出所有 CSR，请输入：

   $ oc get csr -A

   最后，这个命令会显示每个节点的一个 CSR。例如：

   输出示例

   NAME        AGE    SIGNERNAME                                    REQUESTOR                                                                   CONDITION
   csr-2lnxd   63m    kubernetes.io/kubelet-serving                 system:node:ocp4-lk6b4-master0.ocp4.example.org                             Approved,Issued
   csr-hff4q   64m    kubernetes.io/kube-apiserver-client-kubelet   system:serviceaccount:openshift-machine-config-operator:node-bootstrapper   Approved,Issued
   csr-hsn96   60m    kubernetes.io/kubelet-serving                 system:node:ocp4-lk6b4-master2.ocp4.example.org                             Approved,Issued
   csr-m724n   6m2s   kubernetes.io/kube-apiserver-client-kubelet   system:serviceaccount:openshift-machine-config-operator:node-bootstrapper   Pending
   csr-p4dz2   60m    kubernetes.io/kube-apiserver-client-kubelet   system:serviceaccount:openshift-machine-config-operator:node-bootstrapper   Approved,Issued
   csr-t9vfj   60m    kubernetes.io/kubelet-serving                 system:node:ocp4-lk6b4-master1.ocp4.example.org                             Approved,Issued
   csr-tggtr   61m    kubernetes.io/kube-apiserver-client-kubelet   system:serviceaccount:openshift-machine-config-operator:node-bootstrapper   Approved,Issued
   csr-wcbrf   7m6s   kubernetes.io/kube-apiserver-client-kubelet   system:serviceaccount:openshift-machine-config-operator:node-bootstrapper   Pending

3. 要过滤列表并只查看待处理的 CSR，请输入：

   $ watch "oc get csr -A | grep pending -i"

   此命令每两秒钟刷新输出一次，仅显示待处理的 CSR。例如：

   输出示例

   Every 2.0s: oc get csr -A | grep pending -i
   
   csr-m724n   10m   kubernetes.io/kube-apiserver-client-kubelet   system:serviceaccount:openshift-machine-config-operator:node-bootstrapper   Pending
   csr-wcbrf   11m   kubernetes.io/kube-apiserver-client-kubelet   system:serviceaccount:openshift-machine-config-operator:node-bootstrapper   Pending

4. 检查每个待处理的请求。例如：

   输出示例

   $ oc describe csr csr-m724n

   输出示例

   Name:               csr-m724n
   Labels:             <none>
   Annotations:        <none>
   CreationTimestamp:  Sun, 19 Jul 2020 15:59:37 +0200
   Requesting User:    system:serviceaccount:openshift-machine-config-operator:node-bootstrapper
   Signer:             kubernetes.io/kube-apiserver-client-kubelet
   Status:             Pending
   Subject:
            Common Name:    system:node:ocp4-lk6b4-worker1.ocp4.example.org
            Serial Number:
            Organization:   system:nodes
   Events:  <none>

5. 如果 CSR 信息正确，则批准请求：

   $ oc adm certificate approve csr-m724n

6. 等待安装过程完成：

   $ openshift-install wait-for install-complete --dir $ASSETS_DIR --log-level debug

   安装完成后，命令行会显示 OpenShift Container Platform Web 控制台以及管理员用户名和密码的 URL。

流程

1. 在用来安装集群的计算机中包含安装程序的目录中，运行以下命令：

   $ ./openshift-install destroy cluster \
   --dir <installation_directory> --log-level info 1 2

   1

   对于 <installation_directory>，请指定安装文件保存到的目录的路径。

   2

   要查看不同的详情，请指定 warn、debug 或 error，而不要指定 info。

   注意

   您必须为集群指定包含集群定义文件的目录。安装程序需要此目录中的 metadata.json 文件来删除集群。

2. 可选：删除 <installation_directory> 目录和 OpenShift Container Platform 安装程序。

流程

1. 要删除集群，请输入：

   $ ansible-playbook -i inventory.yml \
       retire-bootstrap.yml \
       retire-masters.yml   \
       retire-workers.yml

2. 删除您添加到 DNS、负载均衡器以及此集群的任何其他基础架构的任何配置。