13.3. 使用自定义在 RHV 上安装集群

流程

1. 检查 RHV 版本是否支持安装 OpenShift Container Platform 版本 4.8。

   1. 在 RHV 管理门户中，点右上角的 ? 帮助图表，选 About。
   2. 在打开的窗口中，记录下 RHV 软件版本。
   3. 确认 RHV 版本为 4.4。如需有关支持的版本组合的更多信息，请参阅 RHV 上的 OpenShift Container Platform 支持列表。

2. 检查数据中心、集群和存储。

   1. 在 RHV 管理门户中，点 Compute → Data Centers。
   2. 确认可以访问您要安装 OpenShift Container Platform 的数据中心。
   3. 点击该数据中心的名称。
   4. 在数据中心详情中，存储 标签中确认您要安装 OpenShift Container Platform 的存储域是 Active。
   5. 记录下域名以供以后使用。
   6. 确认 Free Space 至少为 230 GiB。
   7. 确认存储域满足 etcd 后端性能要求，可以使用 fio 性能基准工具来评测。
   8. 在数据中心详情中点击 Clusters 选项卡。
   9. 找到您要安装 OpenShift Container Platform 的 RHV 集群。记录集群名称，以供稍后使用。

3. 检查 RHV 主机资源。

   1. 在 RHV 管理门户中，点 Compute > Clusters。
   2. 点击要安装 OpenShift Container Platform 的集群。
   3. 在集群详情中点击 Hosts 标签页。
   4. 检查主机，确认这些主机有至少 28 个 逻辑 CPU 内核，专门 用于 OpenShift Container Platform 集群。
   5. 记录逻辑 CPU 内核数以供稍后使用。
   6. 请确认这些 CPU 内核被正确分配，在安装过程中创建的七台虚拟机中的每一台都可以有四个内核。

   7. 确认主机总共有 112 GiB 的Max free Memory for scheduling new virtual machines，以满足以下每个 OpenShift Container Platform 机器的要求：

      • bootstrap 机器需要 16 GiB
      • 三个 control plane 机器每个机器都需要 16 GiB
      • 三个计算机器每个机器都需要 16 GiB
   8. 记录下 Max free Memory for scheduling new virtual machine 的值以便稍后使用。

4. 验证安装 OpenShift Container Platform 的虚拟网络能否访问 RHV Manager 的 REST API。在这个网络的虚拟机上，使用 curl 来访问 RHV Manager 的 REST API:

   $ curl -k -u <username>@<profile>:<password> \ 1
   https://<engine-fqdn>/ovirt-engine/api 2

   1

   对于 <username>，指定具有在 RHV 上创建和管理 OpenShift Container Platform 集群的 RHV 帐户的用户名。对于 <profile>，请指定登录配置集，您可以登陆到 RHV 管理门户查看 Profile 下拉列表。对于 <password>，指定该用户的密码。

   2

   对于 <engine-fqdn>，请指定 RHV 环境的完全限定域名。

   例如：

   $ curl -k -u ocpadmin@internal:pw123 \
   https://rhv-env.virtlab.example.com/ovirt-engine/api

流程

1. 保留两个静态 IP 地址

   1. 在您要安装 OpenShift Container Platform 的网络上，标识 DHCP 租期池之外的两个静态 IP 地址。

   2. 连接到此网络中的主机，并确认每个 IP 地址都没有被使用。例如，使用地址解析协议（ARP）检查 IP 地址是否有条目：

      $ arp 10.35.1.19

      输出示例

      10.35.1.19 (10.35.1.19) -- no entry

   3. 为您的网络环境保留两个静态 IP 地址。
   4. 记录这些 IP 地址以备将来参考。

2. 为 OpenShift Container Platform REST API 创建 DNS 条目，并使用以下格式应用域名：

   api.<cluster-name>.<base-domain>   <ip-address> 1
   *.apps.<cluster-name>.<base-domain>   <ip-address> 2

   1

   对于 <cluster-name>、<base-domain>和 <ip-address>，请指定 OpenShift Container Platform API 的集群名称、基域和静态 IP 地址。

   2

   指定 Ingress 和负载均衡器的 OpenShift Container Platform 应用程序的集群名称、基域和静态 IP 地址。

   例如：

   api.my-cluster.virtlab.example.com	10.35.1.19
   *.apps.my-cluster.virtlab.example.com	10.35.1.20

流程

1. 创建名为 ~/.ovirt/ovirt-config.yaml 的文件。

2. 在 ovirt-config.yaml 中添加以下内容：

   ovirt_url: https://ovirt.example.com/ovirt-engine/api 1
   ovirt_fqdn: ovirt.example.com 2
   ovirt_pem_url: ""
   ovirt_username: ocpadmin@internal
   ovirt_password: super-secret-password 3
   ovirt_insecure: true

   1

   指定 oVirt 引擎的主机名或地址。

   2

   指定 oVirt 引擎的完全限定域名。

   3

   指定 oVirt 引擎的 admin 密码。

3. 运行安装程序。

流程

1. 如果您的本地机器上没有用于在集群节点上进行身份验证 SSH 密钥对，请创建一个。例如，在使用 Linux 操作系统的计算机上运行以下命令：

   $ ssh-keygen -t ed25519 -N '' -f <path>/<file_name> 1

   1

   指定新 SSH 密钥的路径和文件名，如 ~/.ssh/id_ed25519。如果您已有密钥对，请确保您的公钥位于 ~/.ssh 目录中。

   注意

   如果您计划在 x86_64 架构中安装使用 FIPS 验证的/Modules in Process 加密库的 OpenShift Container Platform 集群，不要创建使用 ed25519 算法的密钥。反之，创建一个使用 rsa 或 ecdsa 算法的密钥。

2. 查看公共 SSH 密钥：

   $ cat <path>/<file_name>.pub

   例如，运行以下命令查看 ~/.ssh/id_ed25519.pub 公钥：

   $ cat ~/.ssh/id_ed25519.pub

3. 将 SSH 私钥身份添加到您本地用户的 SSH 代理（如果尚未添加）。在集群节点上进行免密码 SSH 身份验证，或者您想要使用 ./openshift-install gather 命令，则需要使用 SSH 代理进行管理。

   注意

   在某些发行版中，会自动管理默认 SSH 私钥（如 ~/.ssh/id_rsa 和 ~/.ssh/id_dsa）。

   1. 如果 ssh-agent 进程还没有针对您的本地用户运行，请将其作为后台任务启动：

      $ eval "$(ssh-agent -s)"

      输出示例

      Agent pid 31874

      注意

      如果您的集群采用 FIPS 模式，则只使用 FIPS 兼容算法来生成 SSH 密钥。密钥必须是 RSA 或 ECDSA。

4. 将 SSH 私钥添加到 ssh-agent：

   $ ssh-add <path>/<file_name> 1

   1

   指定 SSH 私钥的路径和文件名，如 ~/.ssh/id_ed25519

   输出示例

   Identity added: /home/<you>/<path>/<file_name> (<computer_name>)

流程

1. 访问 OpenShift Cluster Manager 站点的 Infrastructure Provider 页面。如果您有红帽帐号，请使用自己的凭证登录。如果没有，请创建一个帐户。
2. 选择您的基础架构供应商。

3. 进入适用于您的安装类型的页面，下载您的操作系统的安装程序，并将文件放在要保存安装配置文件的目录中。。

   重要

   安装程序会在用来安装集群的计算机上创建若干文件。在完成集群安装后，您必须保留安装程序和安装程序所创建的文件。这两个文件都需要删除集群。

   重要

   删除安装程序创建的文件不会删除您的集群，即使集群在安装过程中失败也是如此。要删除集群，为特定云供应商完成 OpenShift Container Platform 卸载流程。

4. 提取安装程序。例如，在使用 Linux 操作系统的计算机上运行以下命令：

   $ tar xvf openshift-install-linux.tar.gz

5. 从 Red Hat OpenShift Cluster Manager 下载安装 pull secret。通过此 pull secret，您可以进行所含授权机构提供的服务的身份验证，这些服务包括为 OpenShift Container Platform 组件提供容器镜像的 Quay.io。

流程

1. 创建 install-config.yaml 文件。

   1. 更改到包含安装程序的目录，再运行以下命令：

      $ ./openshift-install create install-config --dir <installation_directory> 1

      1

      对于 <installation_directory>，请指定用于保存安装程序所创建的文件的目录名称。

      重要

      指定一个空目录。一些安装信息，如 bootstrap X.509 证书，有较短的过期间隔，因此不要重复使用安装目录。如果要重复使用另一个集群安装中的个别文件，可以将其复制到您的目录中。但是，一些安装数据的文件名可能会在发行版本之间有所改变。从 OpenShift Container Platform 老版本中复制安装文件时要格外小心。

   2. 根据安装程序提示输入相关的值。

      1. 对于 SSH 公钥，请选择免密码公钥，如 ~/.ssh/id_rsa.pub。这个密钥被用来验证与新的 OpenShift Container Platform 集群的连接。

         注意

         如果您要在生产环境中执行安装调试或灾难恢复，请指定 ssh-agent 进程需要使用的 SSH 密钥。

      2. 对于 Platform，选择 ovirt。

      3. 对于 Enter oVirt’s API endpoint URL，使用以下格式输入 RHV API 的 URL：

         https://<engine-fqdn>/ovirt-engine/api 1

         1

         对于 <engine-fqdn>，请指定 RHV 环境的完全限定域名。

         例如：

         $ curl -k -u ocpadmin@internal:pw123 \
         https://rhv-env.virtlab.example.com/ovirt-engine/api

      4. 对于 Is the oVirt CA local?，请输入 Yes，因为您已经设置了 CA 证书。否则，请输入 No。
      5. 对于 oVirt 的 CA bundle，如果您为前一个问题输入的是 Yes，请从 /etc/pki/ca-trust/source/anchors/ca.pem 中复制证书内容并粘贴到这里。然后按两次 Enter 键。如果您就前一个问题输入 No，则不会出现这个问题。

      6. 对于 oVirt engine username，请使用以下格式输入 RHV 管理员的用户名和配置文件：

         <username>@<profile> 1

         1

         对于 <username>，请指定 RHV 管理员的用户名。对于 <profile>，请指定登录配置集，您可以登陆到 RHV 管理门户查看 Profile 下拉列表。用户名和配置集应与以下示例相似：

         ocpadmin@internal

      7. 对于 oVirt engine password，请输入 RHV admin 密码。
      8. 对于 oVirt cluster，请选择用于安装 OpenShift Container Platform 的集群。
      9. 对于 oVirt storage domain，请选择安装 OpenShift Container Platform 的存储域。
      10. 对于 oVirt network，请选择可访问 RHV Manager REST API 的虚拟网络。
      11. 对于 Internal API Virtual IP，请为集群的 REST API 输入您设置的静态 IP 地址。
      12. 对于 Ingress virtual IP，请为通配符应用程序域输入您保留的静态 IP 地址。
      13. 对于 Base Domain，请输入 OpenShift Container Platform 集群的基域。如果这个群集暴露于外部世界，这必须是 DNS 基础结构可识别的有效域。例如： 输入 virtlab.example.com
      14. 对于 Cluster Name，请输入集群名称。例如： my-cluster。使用您为 OpenShift Container Platform REST API 创建的外部注册/可解析 DNS 条目的集群名称，以及应用域名。安装程序也将此名称提供给 RHV 环境中的集群。
      15. 对于 Pull Secret，请从之前下载并粘贴的 pull-secret.txt 文件中复制 pull secret。您还可以从 Red Hat OpenShift Cluster Manager 获取同一 pull secret 的副本。

2. 修改 install-config.yaml 文件。您可以在"安装配置参数"部分找到有关可用参数的更多信息。

   注意

   如果您在 Manager 上有任何中间 CA 证书，请验证证书是否出现在 ovirt-config.yaml 文件中以及 install-config.yaml 文件中。如果没有存在，请按如下所示添加：

   1. 在 ~/.ovirt/ovirt-config.yaml 文件中：

      [ovirt_ca_bundle]: |
           -----BEGIN CERTIFICATE-----
           <MY_TRUSTED_CA>
           -----END CERTIFICATE-----
           -----BEGIN CERTIFICATE-----
           <INTERMEDIATE_CA>
           -----END CERTIFICATE-----

   2. 在 install-config.yaml 文件中：

      [additionalTrustBundle]: |
           -----BEGIN CERTIFICATE-----
           <MY_TRUSTED_CA>
           -----END CERTIFICATE-----
           -----BEGIN CERTIFICATE-----
           <INTERMEDIATE_CA>
           -----END CERTIFICATE-----

3. 备份 install-config.yaml 文件，以便用于安装多个集群。

   重要

   install-config.yaml 文件会在安装过程中消耗掉。如果要重复使用此文件，必须现在备份。

流程

1. 更改为包含安装程序的目录并初始化集群部署：

   $ ./openshift-install create cluster --dir <installation_directory> \ 1
       --log-level=info 2

   1

   对于 <installation_directory>，请指定自定义 ./install-config.yaml 文件的位置。

   2

   要查看不同的安装详情，请指定 warn、debug 或 error，而不要指定 info。

   注意

   如果您在主机上配置的云供应商帐户没有足够的权限来部署集群，安装过程将会停止，并且显示缺少的权限。

   集群部署完成后，终端会显示访问集群的信息，包括指向其 Web 控制台的链接和 kubeadmin 用户的凭证。

   输出示例

   ...
   INFO Install complete!
   INFO To access the cluster as the system:admin user when using 'oc', run 'export KUBECONFIG=/home/myuser/install_dir/auth/kubeconfig'
   INFO Access the OpenShift web-console here: https://console-openshift-console.apps.mycluster.example.com
   INFO Login to the console with user: "kubeadmin", and password: "4vYBz-Ee6gm-ymBZj-Wt5AL"
   INFO Time elapsed: 36m22s

   注意

   当安装成功时，集群访问和凭证信息还会输出到 <installation_directory>/.openshift_install.log。

   重要

   • 安装程序生成的 Ignition 配置文件包含在 24 小时后过期的证书，然后在过期时进行续订。如果在更新证书前关闭集群，且集群在 24 小时后重启，集群会自动恢复过期的证书。一个例外情况是，您需要手动批准待处理的 node-bootstrapper 证书签名请求（CSR）来恢复 kubelet 证书。如需更多信息，请参阅从过期的 control plane 证书中恢复的文档。
   • 建议您在生成 12 小时后使用 Ignition 配置文件，因为集群安装后 24 小时证书从 16 小时轮转至 22 小时。通过在 12 小时内使用 Ignition 配置文件，您可以避免在安装过程中运行证书更新时避免安装失败。
   重要

   您不得删除安装程序或安装程序所创建的文件。需要这两者才能删除集群。

流程

1. 进入到红帽客户门户网站上的 OpenShift Container Platform 下载页面。
2. 在 Version 下拉菜单中选择相应的版本。
3. 单击 OpenShift v4.8 Linux 客户端 条目旁边的 Download Now，再保存文件。

4. 解包存档：

   $ tar xvzf <file>

5. 把 oc 二进制代码放到 PATH 中的目录中。

   执行以下命令可以查看当前的 PATH 设置：

   $ echo $PATH

流程

1. 进入到红帽客户门户网站上的 OpenShift Container Platform 下载页面。
2. 在 Version 下拉菜单中选择相应的版本。
3. 单击 OpenShift v4.8 Windows 客户端 条目旁边的 Download Now，再保存文件。
4. 使用 ZIP 程序解压存档。

5. 把 oc 二进制代码放到 PATH 中的目录中。

   要查看您的 PATH，请打开命令提示窗口并执行以下命令：

   C:\> path

流程

1. 进入到红帽客户门户网站上的 OpenShift Container Platform 下载页面。
2. 在 Version 下拉菜单中选择相应的版本。
3. 单击 OpenShift v4.8 MacOSX 客户端 条目旁边的 Download Now，再保存文件。
4. 解包和解压存档。

5. 将 oc 二进制文件移到 PATH 的目录中。

   要查看您的 PATH，打开一个终端窗口并执行以下命令：

   $ echo $PATH

流程

1. 导出 kubeadmin 凭证：

   $ export KUBECONFIG=<installation_directory>/auth/kubeconfig 1

   1

   对于 <installation_directory>，请指定安装文件保存到的目录的路径。

2. 使用导出的配置，验证能否成功运行 oc 命令：

   $ oc whoami

   输出示例

   system:admin

流程

1. 在集群环境中，导出管理员的 kubeconfig 文件：

   $ export KUBECONFIG=<installation_directory>/auth/kubeconfig 1

   1

   对于 <installation_directory>，请指定安装文件保存到的目录的路径。

   kubeconfig 文件包含关于集群的信息，供 CLI 用于将客户端连接到正确集群和 API 服务器。

2. 查看部署后创建的 control plane 和计算机器：

   $ oc get nodes

3. 查看集群的版本：

   $ oc get clusterversion

4. 查看 Operator 的状态：

   $ oc get clusteroperator

5. 查看集群中的所有正在运行的 pod:

   $ oc get pods -A

流程

1. 可选： 在 Red Hat Virtualization (RHV) 管理门户中，打开 Compute → Cluster。
2. 验证安装程序是否创建了虚拟机。
3. 返回到安装程序正在运行的命令行。当安装程序完成后，它会显示登录到 OpenShift Container Platform Web 控制台的用户名和临时密码。

4. 在浏览器中，打开 OpenShift Container Platform web 控制台的 URL。URL 使用以下格式：

   console-openshift-console.apps.<clustername>.<basedomain> 1

   1

   对于 <clustername>.<baseDomain>，请指定集群名称和基域。

   例如：

   console-openshift-console.apps.my-cluster.virtlab.example.com