6.4. グレースフルノードシャットダウンの管理

手順

1. 以下の YAML を kubelet-gns.yaml ファイルに保存して、KubeletConfig CR でシャットダウン猶予期間を定義します。

   apiVersion: machineconfiguration.openshift.io/v1
   kind: KubeletConfig
   metadata:
     name: graceful-shutdown
     namespace: openshift-machine-config-operator
   spec:
     machineConfigPoolSelector:
       matchLabels:
         pools.operator.machineconfiguration.openshift.io/worker: "" 1
     kubeletConfig:
       shutdownGracePeriod: "3m" 2
       shutdownGracePeriodCriticalPods: "2m" 3
   #...

   1

   この例では、worker ロールを持つノードにシャットダウン猶予期間を適用しています。

   2

   通常 Pod のシャットダウン期間を定義します。

   3

   重要 Pod のシャットダウン期間を定義します。

2. 以下のコマンドを実行して KubeletConfig CR を作成します。

   $ oc create -f kubelet-gns.yaml

   出力例

   kubeletconfig.machineconfiguration.openshift.io/graceful-shutdown created

検証

1. コマンドラインを使用するか、kubelet.conf ファイルを表示して、ノードの kubelet ログで猶予期間の設定を確認します。

   注記

   shutdownGracePeriodRequested および shutdownGracePeriodCriticalPods のログメッセージが、KubeletConfig CR に設定された値と一致していることを確認します。

   1. コマンドラインを使用してログを表示するには、以下のコマンドの <node_name> をノードの名前に置き換えて実行します。

      $ oc adm node-logs <node_name> -u kubelet

      出力例

      Sep 12 22:13:46
      ci-ln-qv5pvzk-72292-xvkd9-worker-a-dmbr4
      hyperkube[22317]: I0912 22:13:46.687472
      22317 nodeshutdown_manager_linux.go:134]
      "Creating node shutdown manager"
      shutdownGracePeriodRequested="3m0s" 1
      shutdownGracePeriodCriticalPods="2m0s"
      shutdownGracePeriodByPodPriority=[
      {Priority:0
      ShutdownGracePeriodSeconds:1200}
      {Priority:2000000000
      ShutdownGracePeriodSeconds:600}]
      ...

      1

      shutdownGracePeriodRequested および shutdownGracePeriodCriticalPods のログメッセージが、KubeletConfig CR に設定された値と一致していることを確認します。

   2. ノードの kubelet.conf ファイルでログを表示するには、以下のコマンドを実行してノード上でデバッグセッションを開始します。

      $ oc debug node/<node_name>

      $ chroot /host

      $ cat /etc/kubernetes/kubelet.conf

      出力例

      #...
      “memorySwap”: {},
       “containerLogMaxSize”: “50Mi”,
       “logging”: {
        “flushFrequency”: 0,
        “verbosity”: 0,
        “options”: {
         “json”: {
          “infoBufferSize”: “0”
         }
        }
       },
       “shutdownGracePeriod”: “10m0s”, 1
       “shutdownGracePeriodCriticalPods”: “3m0s”
      }
      #...

      1

      shutdownGracePeriodRequested および shutdownGracePeriodCriticalPods のログメッセージが、KubeletConfig CR に設定された値と一致していることを確認します。

2. グレースフルノードシャットダウン中に以下のコマンドの <pod_name> をノード名に置き換えて実行すると、Pod のグレースフルシャットダウンが実行されたか確認できます。

   $ oc describe pod <pod_name>

   出力例

   Reason:         Terminated
   Message:        Pod was terminated in response to imminent node shutdown.