手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 以下のいずれかの方法を使用して、ホストにデーモンをデプロイします。

   • 方法 1: デーモンの数とホスト名を指定します。

     構文

     ceph orch apply SERVICE_NAME --placement="NUMBER_OF_DAEMONS HOST_NAME_1 HOST_NAME_2 HOST_NAME_3"

     例

     [ceph: root@host01 /]# ceph orch apply mon --placement="2 host01 host02 host03"

   • 方法 2: ラベルをホストに追加してから、ラベルを使用してデーモンをデプロイします。

     1. ホストにラベルを追加します。

        構文

        ceph orch host label add HOSTNAME_1 LABEL_1,LABEL_2

        例

        [ceph: root@host01 /]# ceph orch host label add host01 mon

     2. ラベルでデーモンをデプロイします。

        構文

        ceph orch apply DAEMON_NAME label:_LABEL_1_

        例

        ceph orch apply mon label:mon

   • 方法 3: ホストにラベルを追加して --placement 引数を使用してデプロイします。

     1. ホストにラベルを追加します。

        構文

        ceph orch host label add HOSTNAME_1 LABEL_1,LABEL_2

        例

        [ceph: root@host01 /]# ceph orch host label add host01 mon

     2. ラベルの配置指定を使用してデーモンをデプロイします。

        構文

        ceph orch apply DAEMON_NAME --placement="label:_LABEL_1_"

        例

        ceph orch apply mon --placement="label:mon"

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. Ceph デーモンをデプロイするホストを一覧表示します。

   例

   [ceph: root@host01 /]# ceph orch host ls

3. デーモンをデプロイします。

   構文

   ceph orch apply SERVICE_NAME --placement="NUMBER_OF_DAEMONS HOST_NAME_1 _HOST_NAME_2 HOST_NAME_3"

   例

   ceph orch apply mgr --placement="2 host01 host02 host03"

   この例では、mgr デーモンは、2 つのホストにのみデプロイされます。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 以下のディレクトリーに移動します。

   構文

   cd /var/lib/ceph/DAEMON_PATH/

   例

   [ceph: root@host01 /]# cd /var/lib/ceph/mon/

3. yml ファイルを作成します。

   例

   [ceph: root@host01 mon]# touch mon.yml

4. このファイルは 2 つの方法で設定できます。

   • ファイルを編集して、配置の指定にホストの詳細を含めます。

     構文

     service_type: SERVICE_NAME
     placement:
       hosts:
         - HOST_NAME_1
         - HOST_NAME_2

     例

     service_type: mon
     placement:
       hosts:
         - host01
         - host02
         - host03

   • ファイルを編集し、ラベルの詳細を配置指定に含めます。

     構文

     service_type: SERVICE_NAME
     placement:
       label: "_LABEL_1"

     例

     service_type: mon
     placement:
       label: "mon"

5. サービス指定を使用して Ceph デーモンをデプロイします。

   構文

   ceph orch apply -i FILE_NAME.yml

   例

   [ceph: root@host01 mon]# ceph orch apply -i mon.yml

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. クラスターの SSH 公開鍵をフォルダーに展開します。

   構文

   ceph cephadm get-pub-key > ~/PATH

   例

   [ceph: root@host01 /]# ceph cephadm get-pub-key > ~/ceph.pub

3. Ceph クラスターの SSH 公開鍵を、新たなホストの root ユーザーの authorized_keys ファイルにコピーします。

   構文

   ssh-copy-id -f -i ~/PATH root@HOST_NAME_2

   例

   [root@host01 ~]# ssh-copy-id -f -i ~/ceph.pub root@host02

4. ホストをクラスターに追加します。

   構文

   ceph orch host add HOST_NAME IP_ADDRESS_OF_HOST

   例

   [ceph: root@host01 /]# ceph orch host add host02 10.69.265.25

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 以下のディレクトリーに移動します。

   構文

   cd /var/lib/ceph/DAEMON_PATH/

   例

   [ceph: root@host01 /]# cd /var/lib/ceph/hosts/

3. hosts.yml ファイルを作成します。

   例

   [ceph: root@host01 hosts]# touch hosts.yml

4. hosts.yml ファイルを編集し、以下の詳細を追加します。

   例

   service_type: host
   addr: host01
   hostname: host01
   labels:
   - mon
   - osd
   - mgr
   ---
   service_type: host
   addr: host02
   hostname: host02
   labels:
   - mon
   - osd
   - mgr
   ---
   service_type: host
   addr: host03
   hostname: host03
   labels:
   - mon
   - osd

5. サービス指定を使用してホストをデプロイします。

   構文

   ceph orch apply -i FILE_NAME.yml

   例

   [ceph: root@host01 hosts]# ceph orch apply -i hosts.yml

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. クラスターのホストを一覧表示します。

   例

   [ceph: root@host01 /]# ceph orch host ls

   ホストの STATUS が空白であることを確認できます。これは想定内です。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. ホストにラベルを追加します。

   構文

   ceph orch host label add HOST_NAME LABEL_NAME

   例

   [ceph: root@host01 /]# ceph orch host label add host02 mon

3. 任意: 複数のラベルをホストに追加できます。

   構文

   ceph orch host label add HOSTNAME_1 LABEL_1,LABEL_2

   例

   [ceph: root@host01 /]# ceph orch host label add host01 mon,mgr

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. node-exporter および crash を除くすべての Ceph サービスに対して、ホストを配置指定ファイルから削除します。

   例

   service_type: rgw
   placement:
     hosts:
     - host01
     - host02

   この例では、host03 は Ceph オブジェクトゲートウェイサービスの配置指定を削除します。ホストにデプロイされたすべてのサービスに対して上記の手順を実行する必要があります。

   1. OSD の削除には --unmanaged=True で OSD をデプロイします。

      例

      [ceph: root@host01 /]# ceph orch apply osd --all-available-devices --unmanaged=true

      注記

      これにより、デバイスでの OSD の自動デプロイメントが阻止されます。

   2. OSD を削除します。

      構文

      for osd_id in $(ceph orch ps HOST_NAME --daemon_type osd | grep osd | awk '{print  $1}' | cut -c 5-) ; do ceph orch osd rm $osd_id; done

      例

      [ceph: root@host01 /]# for osd_id in $(ceph orch ps host03 --daemon_type osd | grep osd | awk '{print  $1}' | cut -c 5-) ; do ceph orch osd rm $osd_id; done

   3. ホストを削除します。

      構文

      ceph orch host rm HOST_NAME

      例

      [ceph: root@host01 /]# ceph orch host rm host03

3. node-exporter および crash サービスを削除する必要のあるノードで、以下のコマンドを実行します。

   1. root ユーザーとして、Cephadm シェル外部で、クラスターの fsid の詳細とサービス名を取得します。

      例

      [root@host03 ~]# cephadm ls

   2. fsid および node-exporter サービスの name をコピーします。

   3. サービスを削除します。

      構文

      cephadm rm-daemon --fsid CLUSTER_ID --name SERVICE_NAME

      例

      [root@host03 ~]# cephadm rm-daemon --fsid a34c81a0-889b-11eb-af98-001a4a00063d --name node-exporter.host03

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. ホストをメンテナンスモードにしたり、メンテナンスモードから解除したりできます。

   • ホストをメンテナンスモードにします。

     構文

     ceph orch host maintenance enter HOST_NAME [--force]

     例

     [ceph: root@host01 /]# ceph orch host maintenance enter host02 --force

     --force フラグを使用すると、ユーザーは警告を回避できますが、アラートは回避できません。

   • ホストをメンテナンスモードから解除します。

     構文

     ceph orch host maintenance exit HOST_NAME

     例

     [ceph: root@host01 /]# ceph orch host maintenance exit host02

1. classic - これは、2つのサイト間のエレクターモジュールに基づいて、最も低いランクのモニターが投票されるデフォルトのモードです。
2. disallow - このモードでは、モニターを不許可とマークできます。この場合、モニターはクォーラムに参加してクライアントにサービスを提供しますが、選出されたリーダーになることはできません。これにより、許可されていないリーダーの一覧にモニターを追加できます。モニターが許可されていないリストにある場合、そのモニターは常に別のモニターに先送りされます。
3. connectivity - このモードは、主にネットワークの不一致を解決するために使用されます。ピアに対して各モニターによって提供される接続スコアを評価し、最も接続されたモニターと信頼できるモニターをリーダーに選択します。このモードは、クラスターが複数のデータセンターにまたがっている場合や影響を受けやすい場合に発生する可能性のあるネット分割を処理するように設計されています。このモードでは接続スコア評価が組み込まれ、最良スコアのモニターが選択されます。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. Ceph モニターデーモンをデプロイするには、以下の 4 つの方法があります。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 以下のディレクトリーに移動します。

   構文

   cd /var/lib/ceph/DAEMON_PATH/

   例

   [ceph: root@host01 /]# cd /var/lib/ceph/mon/

3. mon.yml ファイルを作成します。

   例

   [ceph: root@host01 mon]# touch mon.yml

4. mon.yml ファイルを編集し、以下の詳細が含まれるようにします。

   構文

   service_type: mon
   placement:
     hosts:
       - HOST_NAME_1
       - HOST_NAME_2

   例

   service_type: mon
   placement:
     hosts:
       - host01
       - host02

5. モニターデーモンをデプロイします。

   構文

   ceph orch apply -i FILE_NAME.yml

   例

   [ceph: root@host01 mon]# ceph orch apply -i mon.yml

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 自動化されたモニターのデプロイメントを無効にします。

   例

   [ceph: root@host01 /]# ceph orch apply mon --unmanaged

3. 特定ネットワーク上のホストにモニターをデプロイします。

   構文

   ceph orch daemon add mon HOST_NAME_1:_IP_OR_NETWORK_

   例

   [ceph: root@host01 /]# ceph orch daemon add mon host03:10.1.2.123

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. ceph orch apply コマンドを実行して、必要なモニターデーモンをデプロイします。

   構文

   ceph orch apply mon “NUMBER_OF_DAEMONS _HOST_NAME_1 HOST_NAME_3”

   host02 から monitor デーモンを削除する場合は、他のホストにモニターを再デプロイします。

   例

   [ceph: root@host01 /]# ceph orch apply mon “2 host01 host03”

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. マネージャーデーモンをデプロイする方法は 2 つあります。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. ceph orch apply コマンドを実行して、必要なマネージャーデーモンを再デプロイします。

   構文

   ceph orch apply mgr “NUMBER_OF_DAEMONS _HOST_NAME_1 HOST_NAME_3”

   host02 からマネージャーデーモンを削除する場合は、他のホストにマネージャーデーモンを再デプロイします。

   例

   [ceph: root@host01 /]# ceph orch apply mgr “2 host01 host03”

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]#cephadm shell

2. OSD をデプロイするために利用可能なデバイスを一覧表示します。

   構文

   ceph orch device ls [--hostname=HOSTNAME_1 HOSTNAME_2] [--wide] [--refresh]

   例

   [ceph: root@host01 /]# ceph orch device ls --wide --refresh

   --wide オプションを使用すると、デバイスが OSD として使用できない可能性がある理由など、デバイスに関連するすべての詳細が提供されます。このオプションは、NVMe デバイスをサポートしません。

3. 任意手順: ceph orch device ls の出力で Health、Ident および Fault フィールドを有効にするには、以下のコマンドを実行します。

   注記

   これらのフィールドは libstoragemgmt ライブラリーによってサポートされ、現時点では SCSI、SAS、SATA デバイスをサポートします。

   1. root ユーザーとして、ハードウェアと libstoragemgmt ライブラリーとの互換性を確認して、計画外のサービスの中断が発生しないようにします。

      例

      [root@host01 ~]# cephadm shell lsmcli ldl

      この出力で、それぞれの SCSI VPD 0x83 ID で Health Status が Good と表示されます。

      注記

      この情報を取得しないと、フィールドを有効にした場合にデバイスで異常な挙動が発生する可能性があります。

   2. libstoragemgmt サポートを有効にします。

      例

      [ceph: root@host01 /]# ceph config set mgr mgr/cephadm/device_enhanced_scan true

      これを有効にし、ceph orch device ls を実行すると、 Health フィールドの出力が Good になります。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. OSD をデプロイするために利用可能なデバイスを一覧表示します。

   構文

   ceph orch device ls [--hostname=HOSTNAME_1 HOSTNAME_2] [--wide] [--refresh]

   例

   [ceph: root@host01 /]# ceph orch device ls --wide --refresh

3. デバイスのデータを消去します。

   構文

   ceph orch device zap HOSTNAME FILE_PATH --force

   例

   [ceph: root@host01 /]# ceph orch device zap host02 /dev/sdb --force

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. OSD をデプロイするために利用可能なデバイスを一覧表示します。

   構文

   ceph orch device ls [--hostname=HOSTNAME_1 HOSTNAME_2] [--wide] [--refresh]

   例

   [ceph: root@host01 /]# ceph orch device ls --wide --refresh

3. すべての利用可能なデバイスに OSD をデプロイします。

   例

   [ceph: root@host01 /]# ceph orch apply osd --all-available-devices

   ceph orch apply の影響は永続的であり、Orchestrator は自動的にデバイスを見つけ、それをクラスターに追加し、新しい OSD を作成します。これは、以下の条件下で実行されます。

   • 新しいディスクまたはドライブがシステムに追加される。
   • 既存のディスクまたはドライブは消去される。

   • OSD は削除され、デバイスは消去される。

     --unmanaged パラメーターを使用して、利用可能なすべてのデバイスで OSD の自動作成を無効にできます。

     例

     [ceph: root@host01 /]# ceph orch apply osd --all-available-devices --unmanaged=true

     パラメーター --unmanaged を true に設定すると、OSD の作成が無効になり、新しい OSD サービスを適用しても変更はありません。

     注記

     コマンド ceph orch daemon add は、新しい OSD を作成しますが、OSD サービスを追加しません。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. OSD をデプロイするために利用可能なデバイスを一覧表示します。

   構文

   ceph orch device ls [--hostname=HOSTNAME_1 HOSTNAME_2] [--wide] [--refresh]

   例

   [ceph: root@host01 /]# ceph orch device ls --wide --refresh

3. 特定のデバイスおよびホストに OSD をデプロイします。

   構文

   ceph orch daemon add osd HOSTNAME:_DEVICE_PATH_

   例

   [ceph: root@host01 /]# ceph orch daemon add osd host02:/dev/sdb

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. モニターノードで、以下のディレクトリーに移動します。

   構文

   cd /var/lib/ceph/DAEMON_PATH/

   例

   [ceph: root@host01 /]# cd /var/lib/ceph/osd/

3. osd_spec.yml ファイルを作成します。

   例

   [ceph: root@host01 osd]# touch osd_spec.yml

4. osd_spec.yml ファイルを編集し、以下の詳細が含まれるようにします。

   構文

   service_type: osd
   service_id: SERVICE_ID
   placement:
     host_pattern: '*' # optional
   data_devices: # optional
     model: DISK_MODEL_NAME # optional
     paths:
     - /DEVICE_PATH
   osds_per_device: NUMBER_OF_DEVICES # optional
   db_devices: # optional
     size: # optional
     all: true # optional
     paths:
      - /DEVICE_PATH
   encrypted: true

   1. 単純なシナリオ: この場合、すべてのノードが同じ設定になります。

      例

      service_type: osd
      service_id: osd_spec_default
      placement:
        host_pattern: '*'
      data_devices:
        all: true
        paths:
        - /dev/sdb
      encrypted: true

      例

      service_type: osd
      service_id: osd_spec_default
      placement:
        host_pattern: '*'
      data_devices:
        size: '80G'
      db_devices:
        size: '40G:'
        paths:
         - /dev/sdc

   2. 高度なシナリオ: これにより、すべての HDD を専用の DB または WAL デバイスとして割り当てられた 2 つの SSD のある data_devices として使用し、目的のレイアウトを作成します。残りの SSD は、NVME ベンダーが専用の DB または WAL デバイスとして割り当てられている data_devices です。

      例

      service_type: osd
      service_id: osd_spec_hdd
      placement:
        host_pattern: '*'
      data_devices:
        rotational: 0
      db_devices:
        model: Model-name
        limit: 2
      ---
      service_type: osd
      service_id: osd_spec_ssd
      placement:
        host_pattern: '*'
      data_devices:
        model: Model-name
      db_devices:
        vendor: Vendor-name

   3. 不均一のノードを使用する高度なシナリオ: これは、host_pattern キーに応じて、異なる OSD 仕様を異なるホストに適用します。

      例

      service_type: osd
      service_id: osd_spec_node_one_to_five
      placement:
        host_pattern: 'node[1-5]'
      data_devices:
        rotational: 1
      db_devices:
        rotational: 0
      ---
      service_type: osd
      service_id: osd_spec_six_to_ten
      placement:
        host_pattern: 'node[6-10]'
      data_devices:
        model: Model-name
      db_devices:
        model: Model-name

   4. 専用の WAL および DB デバイスを使用した高度なシナリオ:

      例

      service_type: osd
      service_id: osd_using_paths
      placement:
        hosts:
          - host01
          - host02
      data_devices:
        paths:
          - /dev/sdb
      db_devices:
        paths:
          - /dev/sdc
      wal_devices:
        paths:
          - /dev/sdd

   5. デバイスごとに複数の OSD を使用する高度なシナリオ：

      例

      service_type: osd
      service_id: multiple_osds
      placement:
        hosts:
          - host01
          - host02
      osds_per_device: 4
      data_devices:
        paths:
          - /dev/sdb

5. OSD をデプロイする前にドライランを実行します。

   注記

   この手順は、デーモンをデプロイしなくても、デプロイメントのプレビューを提供します。

   例

   [ceph: root@host01 osd]# ceph orch apply -i osd_spec.yml --dry-run

6. サービス指定を使用して OSD をデプロイします。

   構文

   ceph orch apply -i FILE_NAME.yml

   例

   [ceph: root@host01 osd]# ceph orch apply -i osd_spec.yml

1. クラスターからすべての配置グループ (PG) を退避します。
2. クラスターから PG のない OSD を削除します。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. OSD を削除する必要があるデバイスとノードを確認します。

   例

   [ceph: root@host01 /]# ceph osd tree

3. OSD を削除します。

   構文

   ceph orch osd rm OSD_ID [--replace] [--force]

   例

   [ceph: root@host01 /]# ceph orch osd rm 0

   注記

   --replace などのオプションなしにストレージクラスターから OSD を削除すると、デバイスはストレージクラスターから完全に削除されます。OSD のデプロイに同じデバイスを使用する必要がある場合は、そのデバイスをストレージクラスターに追加する前にデバイスを最初に消去する必要があります。

4. オプション： 特定のノードから複数の OSD を削除するには、以下のコマンドを実行します。

   構文

   ceph orch osd rm OSD_ID OSD_ID

   例

   [ceph: root@host01 /]# ceph orch osd rm 2 5

5. OSD の削除のステータスを確認します。

   例

   [ceph: root@host01 /]# ceph orch osd rm status
   OSD_ID  HOST     STATE     PG_COUNT  REPLACE  FORCE  DRAIN_STARTED_AT
   2       host01  draining  124       False    False  2021-09-07 16:26:07.142980
   5       host01  draining  107       False    False  2021-09-07 16:26:08.330371

   OSD に PG が残っていない場合は廃止され、クラスターから削除されます。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. OSD を置き換える必要のあるデバイスとノードを確認します。

   例

   [ceph: root@host01 /]# ceph osd tree

3. OSD を置き換えます。

   構文

   ceph orch osd rm OSD_ID --replace

   例

   [ceph: root@host01 /]# ceph orch osd rm 0 --replace

4. OSD 置き換えのステータスを確認します。

   例

   [ceph: root@host01 /]# ceph orch osd rm status

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 削除するために開始された OSD のデバイスとノードを確認します。

   例

   [ceph: root@host01 /]# ceph osd tree

3. キューに置かれた OSD の削除を停止します。

   構文

   ceph orch osd rm stop OSD_ID

   例

   [ceph: root@host01 /]# ceph orch osd rm stop 0

4. OSD の削除のステータスを確認します。

   例

   [ceph: root@host01 /]# ceph orch osd rm status

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. ホストのオペレーティングシステムを再インストールしたら、OSD をアクティベートします。

   構文

   ceph cephadm osd activate HOSTNAME

   例

   [ceph: root@host01 /]# ceph cephadm osd activate host03

手順

1. balancer モジュールが有効になっていることを確認します。

   例

   [ceph: root@host01 /]# ceph mgr module enable balancer

2. balancer モジュールをオンにします。

   例

   [ceph: root@host01 /]# ceph balancer on

3. デフォルトのモードは crush-compat です。モードは以下のように変更できます。

   例

   [ceph: root@host01 /]# ceph balancer mode upmap

   または

   例

   [ceph: root@host01 /]# ceph balancer mode crush-compat

1. プラン の構築。
2. 現在の PG ディストリビューションまたは プラン 実行後に得られる PG ディストリビューションに対するデータ分散の品質の評価。

3. プラン の実行。

   • 現在のディストリビューションを評価し、スコアを付けます。

     例

     [ceph: root@host01 /]# ceph balancer eval

   • 単一プールのディストリビューションを評価するには、以下を実行します。

     構文

     ceph balancer eval POOL_NAME

     例

     [ceph: root@host01 /]# ceph balancer eval rbd

   • 評価の詳細を表示するには、以下を実行します。

     例

     [ceph: root@host01 /]# ceph balancer eval-verbose ...

   • 現在設定されているモードを使用してプランを生成するには、以下を実行します。

     構文

     ceph balancer optimize PLAN_NAME

     PLAN_NAME は、カスタムプラン名に置き換えます。

     例

     [ceph: root@host01 /]# ceph balancer optimize rbd_123

   • プランの内容を表示するには、以下を実行します。

     構文

     ceph balancer show PLAN_NAME

     例

     [ceph: root@host01 /]# ceph balancer show rbd_123

   • 古いプランを破棄するには、以下を実行します。

     構文

     ceph balancer rm PLAN_NAME

     例

     [ceph: root@host01 /]# ceph balancer rm rbd_123

   • 現在記録されているプランを表示するには、status コマンドを使用します。

     [ceph: root@host01 /]# ceph balancer status

   • プラン実行後に生じるディストリビューションの品質を計算するには、以下を実行します。

     構文

     ceph balancer eval PLAN_NAME

     例

     [ceph: root@host01 /]# ceph balancer eval rbd_123

   • プランを実行するには、以下を実行します。

     構文

     ceph balancer execute PLAN_NAME

     例

     [ceph: root@host01 /]# ceph balancer execute rbd_123

     注記

     ディストリビューションの改善が想定される場合にのみ、プランを実行します。実行後、プランは破棄されます。

手順

1. crash モジュールが有効になっていることを確認します。

   例

   [ceph: root@host01 /]# ceph mgr module ls | more
   {
       "always_on_modules": [
           "balancer",
           "crash",
           "devicehealth",
           "orchestrator_cli",
           "progress",
           "rbd_support",
           "status",
           "volumes"
       ],
       "enabled_modules": [
           "dashboard",
           "pg_autoscaler",
           "prometheus"
       ]

2. クラッシュダンプの保存: meta ファイルは、メタとして crash ディレクトリーに保存されている JSON blob です。ceph コマンド -i - オプションを呼び出すことができます。これは、stdin から読み取ります。

   例

   [ceph: root@host01 /]# ceph crash post -i meta

3. 新しいクラッシュ情報およびアーカイブされたすべてのクラッシュ情報のタイムスタンプまたは UUID クラッシュ ID を表示します。

   例

   [ceph: root@host01 /]# ceph crash ls

4. すべての新規クラッシュ情報のタイムスタンプまたは UUID クラッシュ ID を一覧表示します。

   例

   [ceph: root@host01 /]# ceph crash ls-new

5. すべての新規クラッシュ情報のタイムスタンプまたは UUID クラッシュ ID を一覧表示します。

   例

   [ceph: root@host01 /]# ceph crash ls-new

6. 保存されたクラッシュ情報の概要を経過時間別にグループ化して一覧表示します。

   例

   [ceph: root@host01 /]# ceph crash stat
   8 crashes recorded
   8 older than 1 days old:
   2021-05-20T08:30:14.533316Z_4ea88673-8db6-4959-a8c6-0eea22d305c2
   2021-05-20T08:30:14.590789Z_30a8bb92-2147-4e0f-a58b-a12c2c73d4f5
   2021-05-20T08:34:42.278648Z_6a91a778-bce6-4ef3-a3fb-84c4276c8297
   2021-05-20T08:34:42.801268Z_e5f25c74-c381-46b1-bee3-63d891f9fc2d
   2021-05-20T08:34:42.803141Z_96adfc59-be3a-4a38-9981-e71ad3d55e47
   2021-05-20T08:34:42.830416Z_e45ed474-550c-44b3-b9bb-283e3f4cc1fe
   2021-05-24T19:58:42.549073Z_b2382865-ea89-4be2-b46f-9a59af7b7a2d
   2021-05-24T19:58:44.315282Z_1847afbc-f8a9-45da-94e8-5aef0738954e

7. 保存したクラッシュの詳細を表示します。

   構文

   ceph crash info CRASH_ID

   例

   [ceph: root@host01 /]# ceph crash info 2021-05-24T19:58:42.549073Z_b2382865-ea89-4be2-b46f-9a59af7b7a2d
   {
       "assert_condition": "session_map.sessions.empty()",
       "assert_file": "/builddir/build/BUILD/ceph-16.1.0-486-g324d7073/src/mon/Monitor.cc",
       "assert_func": "virtual Monitor::~Monitor()",
       "assert_line": 287,
       "assert_msg": "/builddir/build/BUILD/ceph-16.1.0-486-g324d7073/src/mon/Monitor.cc: In function 'virtual Monitor::~Monitor()' thread 7f67a1aeb700 time 2021-05-24T19:58:42.545485+0000\n/builddir/build/BUILD/ceph-16.1.0-486-g324d7073/src/mon/Monitor.cc: 287: FAILED ceph_assert(session_map.sessions.empty())\n",
       "assert_thread_name": "ceph-mon",
       "backtrace": [
           "/lib64/libpthread.so.0(+0x12b30) [0x7f679678bb30]",
           "gsignal()",
           "abort()",
           "(ceph::__ceph_assert_fail(char const*, char const*, int, char const*)+0x1a9) [0x7f6798c8d37b]",
           "/usr/lib64/ceph/libceph-common.so.2(+0x276544) [0x7f6798c8d544]",
           "(Monitor::~Monitor()+0xe30) [0x561152ed3c80]",
           "(Monitor::~Monitor()+0xd) [0x561152ed3cdd]",
           "main()",
           "__libc_start_main()",
           "_start()"
       ],
       "ceph_version": "16.1.0-486.el8cp",
       "crash_id": "2021-05-24T19:58:42.549073Z_b2382865-ea89-4be2-b46f-9a59af7b7a2d",
       "entity_name": "mon.ceph-adm4",
       "os_id": "rhel",
       "os_name": "Red Hat Enterprise Linux",
       "os_version": "8.3 (Ootpa)",
       "os_version_id": "8.3",
       "process_name": "ceph-mon",
       "stack_sig": "957c21d558d0cba4cee9e8aaf9227b3b1b09738b8a4d2c9f4dc26d9233b0d511",
       "timestamp": "2021-05-24T19:58:42.549073Z",
       "utsname_hostname": "host02",
       "utsname_machine": "x86_64",
       "utsname_release": "4.18.0-240.15.1.el8_3.x86_64",
       "utsname_sysname": "Linux",
       "utsname_version": "#1 SMP Wed Feb 3 03:12:15 EST 2021"
   }

8. KEEP の日数より古い保存済みクラッシュを削除します。ここで、KEEP は整数である必要があります。

   構文

   ceph crash prune KEEP

   例

   [ceph: root@host01 /]# ceph crash prune 60

9. RECENT_CRASH ヘルスチェックで考慮されなくなり、crash ls-new の出力に表示されないようにクラッシュレポートをアーカイブします。crash ls に表示されます。

   構文

   ceph crash archive CRASH_ID

   例

   [ceph: root@host01 /]# ceph crash archive 2021-05-24T19:58:42.549073Z_b2382865-ea89-4be2-b46f-9a59af7b7a2d

10. すべてのクラッシュレポートをアーカイブします。

    例

    [ceph: root@host01 /]# ceph crash archive-all

11. クラッシュダンプを削除します。

    構文

    ceph crash rm CRASH_ID

    例

    [ceph: root@host01 /]# ceph crash rm 2021-05-24T19:58:42.549073Z_b2382865-ea89-4be2-b46f-9a59af7b7a2d

手順

1. Ceph Manager デーモンで prometheus モジュールを有効にします。これにより、内部 Ceph メトリクスが公開され、Prometheus がそれらを読み取りできます。

   例

   [ceph: root@host01 /]# ceph mgr module enable prometheus

   重要

   このコマンドは、Prometheus のデプロイ前に実行されるようにします。デプロイメントの前にコマンドが実行されなかった場合は、Prometheus を再デプロイして設定を更新する必要があります。

   ceph orch redeploy prometheus

2. 以下のディレクトリーに移動します。

   構文

   cd /var/lib/ceph/DAEMON_PATH/

   例

   [ceph: root@host01 mds/]# cd /var/lib/ceph/monitoring/

   注記

   ディレクトリー monitoring が存在しない場合は、作成します。

3. monitoring.yml ファイルを作成します。

   例

   [ceph: root@host01 monitoring]# touch monitoring.yml

4. 以下の例のような内容で指定ファイルを編集します。

   例

   service_type: prometheus
   service_name: prometheus
   placement:
     hosts:
     - host01
   networks:
   - 192.169.142.0/24
   ---
   service_type: node-exporter
   ---
   service_type: alertmanager
   service_name: alertmanager
   placement:
     hosts:
     - host03
   networks:
   - 192.169.142.03/24
   ---
   service_type: grafana
   service_name: grafana
   placement:
     hosts:
     - host02
   networks:
   - 192.169.142.02/24

5. モニタリングサービスを適用します。

   例

   [ceph: root@host01 monitoring]# ceph orch apply -i monitoring.yml

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. ceph orch rm コマンドを使用してモニタリングスタックを削除します。

   構文

   ceph orch rm SERVICE_NAME --force

   例

   [ceph: root@host01 /]# ceph orch rm grafana
   [ceph: root@host01 /]# ceph orch rm prometheus
   [ceph: root@host01 /]# ceph orch rm node-exporter
   [ceph: root@host01 /]# ceph orch rm alertmanager
   [ceph: root@host01 /]# ceph mgr module disable prometheus

3. プロセスのステータスを確認します。

   例

   [ceph: root@host01 /]# ceph orch status

手順

1. ファイルを設定するノードで、/etc フォルダーにディレクトリー ceph を作成します。

   例

   [root@host01 ~]# mkdir /etc/ceph/

2. /etc/ceph ディレクトリーに移動します。

   例

   [root@host01 ~]# cd /etc/ceph/

3. ceph ディレクトリーで設定ファイルを生成します。

   例

   [root@host01 ceph]# ceph config generate-minimal-conf
   
   # minimal ceph.conf for 417b1d7a-a0e6-11eb-b940-001a4a000740
   [global]
   	fsid = 417b1d7a-a0e6-11eb-b940-001a4a000740
   	mon_host = [v2:10.74.249.41:3300/0,v1:10.74.249.41:6789/0]

   このファイルのコンテンツは、/etc/ceph/ceph.conf パスにインストールする必要があります。この設定ファイルを使用して、Ceph モニターに到達できます。

手順

1. キーリングを設定するノードで、/etc フォルダーにディレクトリー ceph を作成します。

   例

   [root@host01 ~]# mkdir /etc/ceph/

2. ceph ディレクトリーの /etc/ceph ディレクトリーに移動します。

   例

   [root@host01 ~]# cd /etc/ceph/

3. クライアントのキーリングを生成します。

   構文

   ceph auth get-or-create client.CLIENT_NAME -o /etc/ceph/NAME_OF_THE_FILE

   例

   [root@host01 ceph]# ceph auth get-or-create client.fs -o /etc/ceph/ceph.keyring

4. ceph.keyring ファイルの出力を確認します。

   例

   [root@host01 ceph]# cat ceph.keyring
   
   [client.fs]
   	key = AQAvoH5gkUCsExAATz3xCBLd4n6B6jRv+Z7CVQ==

   出力は /etc/ceph/ceph.keyring などのキーリングファイルに配置する必要があります。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 配置指定を使用して MDS デーモンをデプロイする方法は 2 つあります。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]#cephadm shell

2. 以下のディレクトリーに移動します。

   構文

   cd /var/lib/ceph/DAEMON_PATH/

   例

   [ceph: root@host01 mds]# cd /var/lib/ceph/mds/

   注記

   ディレクトリー mds が存在しない場合は、作成します。

3. mds.yml ファイルを作成します。

   例

   [ceph: root@host01 mds/]# touch mds.yml

4. mds.yml ファイルを編集し、以下の詳細が含まれるようにします。

   構文

   service_type: mds
   service_id: FILESYSTEM_NAME
   placement:
     hosts:
     - HOST_NAME_1
     - HOST_NAME_2
     - HOST_NAME_3

   例

   service_type: mds
   service_id: fs_name
   placement:
     hosts:
     - host01
     - host02

5. サービス指定を使用して MDS サービスをデプロイします。

   構文

   ceph orch apply -i FILE_NAME.yml

   例

   [ceph: root@host01 mds]# ceph orch apply -i mds.yml

6. MDS サービスがデプロイされ、機能したら、CephFS を作成します。

   構文

   ceph fs new CEPHFS_NAME METADATA_POOL DATA_POOL

   例

   [ceph: root@host01 /]# ceph fs new test metadata_pool data_pool

手順

1. MDS デーモンをクラスターから削除する方法は 2 つあります。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. Ceph オブジェクトゲートウェイデーモンは、以下の 3 つの方法でデプロイできます。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 以下のディレクトリーに移動します。

   構文

   cd /var/lib/ceph/DAEMON_PATH/

   例

   [ceph: root@host01 nfs/]# cd /var/lib/ceph/rgw/

   rgw ディレクトリーが存在しない場合は、パスにディレクトリーを作成します。

3. rgw.yml ファイルを作成します。

   例

   [ceph: root@host01 rgw]# touch rgw.yml

4. rgw.yml ファイルを編集して、以下の詳細を追加します。

   構文

   service_type: rgw
   service_id: REALM_NAME.ZONE_NAME
   placement:
     hosts:
     - HOST_NAME_1
     - HOST_NAME_2
   spec:
     rgw_realm: REALM_NAME
     rgw_zone: ZONE_NAME
   networks:
     -  NETWORK_IP_ADDRESS # RGW service binds to a specific network

   例

   service_type: rgw
   service_id: test_realm.test_zone
   placement:
     hosts:
     - host01
     - host02
     - host03
   spec:
     rgw_realm: test_realm
     rgw_zone: test_zone
   networks:
     - 192.169.142.0/24

5. サービス仕様を使用して Ceph オブジェクトゲートウェイをデプロイします。

   構文

   ceph orch apply -i FILE_NAME.yml

   例

   [ceph: root@host01 rgw]# ceph orch apply -i rgw.yml

手順

1. cephadm シェルで、プライマリーゾーンを設定します。

   1. レルムを作成します。

      構文

      radosgw-admin realm create --rgw-realm=REALM_NAME --default

      例

      [ceph: root@host01 /]# radosgw-admin realm create --rgw-realm=test_realm --default

      ストレージクラスターに単一のレルムがある場合は、--default フラグを指定します。

   2. プライマリーゾーングループを作成します。

      構文

      radosgw-admin zonegroup create --rgw-zonegroup=ZONE_GROUP_NAME --endpoints=http://RGW_PRIMARY_HOSTNAME:_RGW_PRIMARY_PORT_NUMBER_1_ --master --default

      例

      [ceph: root@host01 /]# radosgw-admin zonegroup create --rgw-zonegroup=us --endpoints=http://rgw1:80 --master --default

   3. プライマリーゾーンを作成します。

      構文

      radosgw-admin zone create --rgw-zonegroup=PRIMARY_ZONE_GROUP_NAME --rgw-zone=PRIMARY_ZONE_NAME --endpoints=http://RGW_PRIMARY_HOSTNAME:_RGW_PRIMARY_PORT_NUMBER_1_ --access-key=SYSTEM_ACCESS_KEY --secret=SYSTEM_SECRET_KEY

      例

      [ceph: root@host01 /]# radosgw-admin zone create --rgw-zonegroup=us --rgw-zone=us-east-1 --endpoints=http://rgw1:80

   4. 必要に応じて、デフォルトゾーン、ゾーングループ、および関連するプールを削除します。

      重要

      デフォルトゾーンおよびゾーングループを使用してデータを保存する場合は、デフォルトゾーンとそのプールは削除しないでください。また、デフォルトのゾーングループを削除して、システムユーザーを削除します。

      例

      [ceph: root@host01 /]# radosgw-admin zonegroup delete --rgw-zonegroup=default
      [ceph: root@host01 /]# ceph osd pool rm default.rgw.log default.rgw.log --yes-i-really-really-mean-it
      [ceph: root@host01 /]# ceph osd pool rm default.rgw.meta default.rgw.meta --yes-i-really-really-mean-it
      [ceph: root@host01 /]# ceph osd pool rm default.rgw.control default.rgw.control --yes-i-really-really-mean-it
      [ceph: root@host01 /]# ceph osd pool rm default.rgw.data.root default.rgw.data.root --yes-i-really-really-mean-it
      [ceph: root@host01 /]# ceph osd pool rm default.rgw.gc default.rgw.gc --yes-i-really-really-mean-it

   5. システムユーザーを作成します。

      構文

      radosgw-admin user create --uid=USER_NAME --display-name="USER_NAME" --access-key=SYSTEM_ACCESS_KEY --secret=SYSTEM_SECRET_KEY --system

      例

      [ceph: root@host01 /]# radosgw-admin user create --uid=zone.user --display-name="Zone user" --system

      access_key および secret_key を書き留めておきます。

   6. アクセスキーとシステムキーをプライマリゾーンに追加します。

      構文

      radosgw-admin zone modify --rgw-zone=PRIMARY_ZONE_NAME --access-key=ACCESS_KEY --secret=SECRET_KEY

      例

      [ceph: root@host01 /]# radosgw-admin zone modify --rgw-zone=us-east-1 --access-key=NE48APYCAODEPLKBCZVQ--secret=u24GHQWRE3yxxNBnFBzjM4jn14mFIckQ4EKL6LoW

   7. 変更をコミットします。

      構文

      radosgw-admin period update --commit

      例

      [ceph: root@host01 /]# radosgw-admin period update --commit

   8. cephadm シェルの外部で、ストレージクラスターおよびプロセスの FSID を取得します。

      例

      [root@host01 ~]#  systemctl list-units | grep ceph

   9. Ceph Object Gateway デーモンを起動します。

      構文

      systemctl start ceph-FSID@DAEMON_NAME
      systemctl enable ceph-FSID@DAEMON_NAME

      例

      [root@host01 ~]# systemctl start ceph-62a081a6-88aa-11eb-a367-001a4a000672@rgw.test_realm.us-east-1.host01.ahdtsw.service
      [root@host01 ~]# systemctl enable ceph-62a081a6-88aa-11eb-a367-001a4a000672@rgw.test_realm.us-east-1.host01.ahdtsw.service

2. Cephadm シェルで、セカンダリーゾーンを設定します。

   1. プライマリーゾーンおよびプライマリーゾーングループの URL パス、アクセスキー、および秘密鍵を使用して、ホストからレルム設定をプルします。

      構文

      radosgw-admin period pull --url=URL_TO_PRIMARY_ZONE_GATEWAY --access-key=ACCESS_KEY --secret-key=SECRET_KEY

      例

      [ceph: root@host04 /]# radosgw-admin period pull --url=http://10.74.249.26:80 --access-key=LIPEYZJLTWXRKXS9LPJC --secret-key=IsAje0AVDNXNw48LjMAimpCpI7VaxJYSnfD0FFKQ

   2. セカンダリーゾーンを設定します。

      構文

      radosgw-admin zone create --rgw-zonegroup=ZONE_GROUP_NAME \
                   --rgw-zone=SECONDARY_ZONE_NAME --endpoints=http://RGW_SECONDARY_HOSTNAME:_RGW_PRIMARY_PORT_NUMBER_1_ \
                   --access-key=SYSTEM_ACCESS_KEY --secret=SYSTEM_SECRET_KEY \
                   --endpoints=http://FQDN:80 \
                   [--read-only]

      例

      [ceph: root@host04 /]# radosgw-admin zone create --rgw-zonegroup=us --rgw-zone=us-east-2 --endpoints=http://rgw2:80 --access-key=LIPEYZJLTWXRKXS9LPJC --secret-key=IsAje0AVDNXNw48LjMAimpCpI7VaxJYSnfD0FFKQ

   3. 必要に応じて、デフォルトゾーンを削除します。

      重要

      デフォルトゾーンおよびゾーングループを使用してデータを保存する場合は、デフォルトゾーンとそのプールは削除しないでください。

      例

      [ceph: root@host04 /]# radosgw-admin zone rm --rgw-zone=default
      [ceph: root@host04 /]# ceph osd pool rm default.rgw.log default.rgw.log --yes-i-really-really-mean-it
      [ceph: root@host04 /]# ceph osd pool rm default.rgw.meta default.rgw.meta --yes-i-really-really-mean-it
      [ceph: root@host04 /]# ceph osd pool rm default.rgw.control default.rgw.control --yes-i-really-really-mean-it
      [ceph: root@host04 /]# ceph osd pool rm default.rgw.data.root default.rgw.data.root --yes-i-really-really-mean-it
      [ceph: root@host04 /]# ceph osd pool rm default.rgw.gc default.rgw.gc --yes-i-really-really-mean-it

   4. Ceph 設定データベースを更新します。

      構文

      ceph config set _SERVICE_NAME_ rgw_zone _SECONDARY_ZONE_NAME_

      例

      [ceph: root@host04 /]# ceph config set rgw rgw_zone us-east-2

   5. 変更をコミットします。

      構文

      radosgw-admin period update --commit

      例

      [ceph: root@host04 /]# radosgw-admin period update --commit

   6. Cephadm シェルの外部で、ストレージクラスターおよびプロセスの FSID を取得します。

      例

      [root@host04 ~]#  systemctl list-units | grep ceph

   7. Ceph Object Gateway デーモンを起動します。

      構文

      systemctl start ceph-FSID@DAEMON_NAME
      systemctl enable ceph-FSID@DAEMON_NAME

      例

      [root@host04 ~]# systemctl start ceph-62a081a6-88aa-11eb-a367-001a4a000672@rgw.test_realm.us-east-2.host04.ahdtsw.service
      [root@host04 ~]# systemctl enable ceph-62a081a6-88aa-11eb-a367-001a4a000672@rgw.test_realm.us-east-2.host04.ahdtsw.service

3. 必要に応じて、配置仕様を使用して、マルチサイトの Ceph Object Gateway をデプロイします。

   構文

   ceph orch apply rgw _NAME_ --realm=_REALM_NAME_ --zone=_PRIMARY_ZONE_NAME_ --placement="_NUMBER_OF_DAEMONS_ _HOST_NAME_1_ _HOST_NAME_2_"

   例

   [ceph: root@host04 /]# ceph orch apply rgw east --realm=test_realm --zone=us-east-1 --placement="2 host01 host02"

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. サービスを一覧表示します。

   例

   [ceph: root@host01 /]# ceph orch ls

   1. サービスの削除

      構文

      ceph orch rm SERVICE_NAME

      例

      [ceph: root@host01 /]# ceph orch rm rgw.test_realm.test_zone_bb

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. mgr/nfs モジュールを有効にします。

   例

   [ceph: root@host01 /]# ceph mgr module enable nfs

3. クラスターを作成します。

   構文

   ceph nfs cluster create CLUSTER_NAME ["HOST_NAME_1_,HOST_NAME_2,HOST_NAME_3"]

   CLUSTER_NAME は任意の文字列です。HOST _NAME_1 は、NFS-Ganesha デーモンをデプロイするためにホストを表す任意の文字列です。

   例

   [ceph: root@host01 /]# ceph nfs cluster create nfsganesha "host01, host02"

   これにより、host01 および host02 の 1 つのデーモンと、NFS_Ganesha クラスター nfsganesha が作成されます。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. RADOS プール namespace を作成し、アプリケーションを有効にします。

   構文

   ceph osd pool create POOL_NAME _
   ceph osd pool application enable POOL_NAME freeform/rgw/rbd/cephfs/nfs
   rbd pool init -p POOL_NAME

   例

   [ceph: root@host01 /]# ceph osd pool create nfs-ganesha
   [ceph: root@host01 /]# ceph osd pool application enable nfs-ganesha nfs
   [ceph: root@host01 /]# rbd pool init -p nfs-ganesha

3. コマンドラインインターフェースで配置指定を使用して NFS-Ganesha ゲートウェイをデプロイします。

   構文

   ceph orch apply nfs SERVICE_ID --pool POOL_NAME --namespace NAMESPACE --placement="NUMBER_OF_DAEMONS HOST_NAME_1 HOST_NAME_2 HOST_NAME_3"

   例

   [ceph: root@host01 /]# ceph orch apply nfs foo --pool nfs-ganesha --namespace nfs-ns --placement="2 host01 host02"

   これにより、host01 および host02 の 1 つのデーモンと、NFS-Ganesha クラスター nfsganesha がデプロイされます。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. RADOS プールと namespace を作成し、RBD を有効にします。

   構文

   ceph osd pool create POOL_NAME _
   ceph osd pool application enable POOL_NAME rbd
   rbd pool init -p POOL_NAME

   例

   [ceph: root@host01 /]# ceph osd pool create nfs-ganesha
   [ceph: root@host01 /]#ceph osd pool application enable nfs-ganesha rbd
   [ceph: root@host01 /]#rbd pool init -p nfs-ganesha

3. 以下のディレクトリーに移動します。

   構文

   cd /var/lib/ceph/DAEMON_PATH/

   例

   [ceph: root@host01 nfs/]# cd /var/lib/ceph/nfs/

   nfs ディレクトリーが存在しない場合は、パス上に作成します。

4. nfs.yml ファイルを作成します。

   例

   [ceph: root@host01 nfs]# touch nfs.yml

5. nfs.yml ファイルを編集し、以下の詳細が含まれるようにします。

   構文

   service_type: nfs
   service_id: SERVICE_ID
   placement:
     hosts:
       - HOST_NAME_1
       - HOST_NAME_2
   spec:
     pool: POOL_NAME
     namespace: NAMESPACE

   例

   service_type: nfs
   service_id: foo
   placement:
     hosts:
       - host01
       - host02
   spec:
     pool: nfs-ganesha
     namespace: nfs-ns

6. サービス指定を使用して NFS-Ganesha ゲートウェイをデプロイします。

   構文

   ceph orch apply -i FILE_NAME.yml

   例

   [ceph: root@host01 nfs]# ceph orch apply -i nfs.yml

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. クラスターを更新します。

   構文

   ceph orch apply nfs CLUSTER_NAME ["HOST_NAME_1,HOST_NAME_2,HOST_NAME_3"]

   CLUSTER_NAME は任意の文字列です。HOST _NAME_1 は、デプロイされた NFS-Ganesha デーモンをするためにホストを表す任意の文字列です。

   例

   [ceph: root@host01 /]# ceph orch apply nfs nfsganesha "host02"

   これにより、host02 上の nfsganesha クラスターが更新されます。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. NFS-Ganesha クラスター情報を表示します。

   構文

   ceph nfs cluster info CLUSTER_NAME

   例

   [ceph: root@host01 /]# ceph nfs cluster info nfsganesha
   
   {
       "nfsganesha": [
           {
               "hostname": "host02",
               "ip": [
                   "10.74.251.164"
               ],
               "port": 2049
           }
       ]
   }

手順

1. root ユーザーとして、ストレージクラスターの FSID を取得します。

   例

   [root@host03 ~]# cephadm ls

   FSID とサービスの名前をコピーします。

2. ログを取得します。

   構文

   cephadm logs --fsid FSID --name SERVICE_NAME

   例

   [root@host03 ~]# cephadm logs --fsid 499829b4-832f-11eb-8d6d-001a4a000635 --name nfs.foo.host03

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 以下は、NFS-Ganesha クラスターのデフォルト設定の例です。

   例

   # {{ cephadm_managed }}
   NFS_CORE_PARAM {
           Enable_NLM = false;
           Enable_RQUOTA = false;
           Protocols = 4;
   }
   
   MDCACHE {
           Dir_Chunk = 0;
   }
   
   EXPORT_DEFAULTS {
           Attr_Expiration_Time = 0;
   }
   
   NFSv4 {
           Delegations = false;
           RecoveryBackend = 'rados_cluster';
           Minor_Versions = 1, 2;
   }
   
   RADOS_KV {
           UserId = "{{ user }}";
           nodeid = "{{ nodeid}}";
           pool = "{{ pool }}";
           namespace = "{{ namespace }}";
   }
   
   RADOS_URLS {
           UserId = "{{ user }}";
           watch_url = "{{ url }}";
   }
   
   RGW {
           cluster = "ceph";
           name = "client.{{ rgw_user }}";
   }
   
   %url    {{ url }}

3. NFS-Ganesha クラスター設定をカスタマイズします。以下は、設定をカスタマイズする 2 つの例です。

   • ログレベルを変更します。

     例

     LOG {
      COMPONENTS {
          ALL = FULL_DEBUG;
      }
     }

   • カスタムエクスポートブロックを追加します。

     1. ユーザーを作成します。

        注記

        FSAL ブロックで指定されたユーザーは、NFS-Ganesha デーモンが Cephク ラスターにアクセスするための適切な上限を設定する必要があります。

        構文

        ceph auth get-or-create client.USER_NAME mon 'allow r' osd 'allow rw pool=POOL_NAME namespace=NFS_CLUSTER_NAME, allow rw tag cephfs data=FILE_SYSTEM_NAME' mds 'allow rw path=EXPORT_PATH'

        例

        [ceph: root@host01 /]# ceph auth get-or-create client.nfstest1 mon 'allow r' osd 'allow rw pool=nfsganesha namespace=nfs_cluster_name, allow rw tag cephfs data=filesystem_name' mds 'allow rw path=export_path

     2. 以下のディレクトリーに移動します。

        構文

        cd /var/lib/ceph/DAEMON_PATH/

        例

        [ceph: root@host01 /]# cd /var/lib/ceph/nfs/

        nfs ディレクトリーが存在しない場合は、パス上に作成します。

     3. 新しい設定ファイルを作成します。

        構文

        touch PATH_TO_CONFIG_FILE

        例

        [ceph: root@host01 nfs]#  touch nfs-ganesha.conf

     4. カスタムエクスポートブロックを追加して設定ファイルを編集します。1 つのエクスポートを作成し、これは Ceph NFS エクスポートインターフェースによって管理されます。

        構文

        EXPORT {
          Export_Id = NUMERICAL_ID;
          Transports = TCP;
          Path = PATH_WITHIN_CEPHFS;
          Pseudo = BINDING;
          Protocols = 4;
          Access_Type = PERMISSIONS;
          Attr_Expiration_Time = 0;
          Squash = None;
          FSAL {
            Name = CEPH;
            Filesystem = "FILE_SYSTEM_NAME";
            User_Id = "USER_NAME";
            Secret_Access_Key = "USER_SECRET_KEY";
          }
        }

        例

        EXPORT {
          Export_Id = 100;
          Transports = TCP;
          Path = /;
          Pseudo = /ceph/;
          Protocols = 4;
          Access_Type = RW;
          Attr_Expiration_Time = 0;
          Squash = None;
          FSAL {
            Name = CEPH;
            Filesystem = "filesystem name";
            User_Id = "user id";
            Secret_Access_Key = "secret key";
          }
        }

4. 新規の設定を適用します。

   構文

   ceph nfs cluster config set _CLUSTER_NAME_ -i _PATH_TO_CONFIG_FILE_

   例

   [ceph: root@host01 nfs]# ceph nfs cluster config set nfs-ganesha -i /root/nfs-ganesha.conf

   これにより、カスタム設定のサービスも再起動されます。

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. NFS_Ganesha 設定をリセットします。

   構文

   ceph nfs cluster config reset CLUSTER_NAME

   例

   [ceph: root@host01 /]# ceph nfs cluster config reset nfsganesha

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. クラスターを削除します。

   構文

   ceph nfs cluster delete CLUSTER_NAME

   CLUSTER_NAME は任意の文字列です。

   例

   [ceph: root@host01 /]# ceph nfs cluster delete nfsganesha
   NFS Cluster Deleted Successfully

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. サービスを一覧表示します。

   例

   [ceph: root@host01 /]# ceph orch ls

3. サービスの削除

   構文

   ceph orch rm SERVICE_NAME

   例

   [ceph: root@host01 /]# ceph orch rm nfs.foo

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. プールを作成します。

   構文

   ceph osd pool create POOL_NAME

   例

   [ceph: root@host01 /]# ceph osd pool create mypool

3. コマンドラインインターフェースを使用して iSCSI ゲートウェイをデプロイします。

   構文

   ceph orch apply iscsi POOLNAME admin admin --placement="NUMBER_OF_DAEMONS HOST_NAME_1 HOST_NAME_2"

   例

   [ceph: root@host01 /]# ceph orch apply iscsi mypool admin admin --placement="1 host01"

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. 以下のディレクトリーに移動します。

   構文

   cd /var/lib/ceph/DAEMON_PATH/

   例

   [ceph: root@host01 /]# cd /var/lib/ceph/iscsi/

   注記: iscsi ディレクトリーが存在しない場合は作成します。

3. iscsi.yml ファイルを作成します。

   例

   [ceph: root@host01 iscsi]# touch iscsi.yml

4. iscsi.yml ファイルを編集して、以下の詳細が含まれるようにします。

   構文

   service_type: iscsi
   service_id: iscsi
   placement:
     hosts:
       - HOST_NAME_1
       - HOST_NAME_2
   spec:
     pool: POOL_NAME  # RADOS pool where ceph-iscsi config data is stored.
     trusted_ip_list: "IP_ADDRESS_1,IP_ADDRESS_2" # optional
     api_port: ... # optional
     api_user: API_USERNAME # optional
     api_password: API_PASSWORD # optional
     api_secure: true/false # optional
     ssl_cert: | # optional
     ...
     ssl_key: | # optional
     ...

   例

   service_type: iscsi
   service_id: iscsi
   placement:
     hosts:
       - host01
   spec:
     pool: mypool

5. サービス指定を使用して iSCSI ゲートウェイをデプロイします。

   構文

   ceph orch apply -i FILE_NAME.yml

   例

   [ceph: root@host01 iscsi]# ceph orch apply -i iscsi.yml

手順

1. Cephadm シェルにログインします。

   例

   [root@host01 ~]# cephadm shell

2. サービスを一覧表示します。

   例

   [ceph: root@host01 /]# ceph orch ls

   1. サービスの削除

      構文

      ceph orch rm SERVICE_NAME

      例

      [ceph: root@host01 /]# ceph orch rm iscsi.iscsi

手順

1. ストレージクラスターの他のノードが、短縮ホスト名で新規ノードに到達できることを確認します。

2. スクラビングを一時的に無効にします。

   例

   [ceph: root@host01 /]# ceph osd set noscrub
   [ceph: root@host01 /]# ceph osd set nodeep-scrub

3. バックフィルおよび復元機能を制限します。

   構文

   ceph tell DAEMON_TYPE.* injectargs --OPTION_NAME VALUE [--OPTION_NAME VALUE]

   例

   [ceph: root@host01 /]# ceph tell osd.* injectargs --osd-max-backfills 1 --osd-recovery-max-active 1 --osd-recovery-op-priority 1

4. クラスターの SSH 公開鍵をフォルダーに展開します。

   構文

   ceph cephadm get-pub-key > ~/PATH

   例

   [ceph: root@host01 /]# ceph cephadm get-pub-key > ~/ceph.pub

5. ceph クラスターの SSH 公開鍵を、新たなホストの root ユーザーの authorized_keys ファイルにコピーします。

   構文

   ssh-copy-id -f -i ~/PATH root@HOST_NAME_2

   例

   [ceph: root@host01 /]# ssh-copy-id -f -i ~/ceph.pub root@host02

6. 新規ノードを CRUSH マップに追加します。

   構文

   ceph orch host add NODE_NAME IP_ADDRESS

   例

   [ceph: root@host01 /]# ceph orch host add host02 168.20.20.2

7. ノードの各ディスクの OSD をストレージクラスターに追加します。

   • 利用可能なすべてのデバイスへの Ceph OSD のデプロイ
   • 高度なサービス指定を使用した Ceph OSD のデプロイ
   • 特定のデバイスおよびホストへの Ceph OSD のデプロイ

手順

1. ストレージクラスターの容量を確認します。

   構文

   ceph df
   rados df
   ceph osd df

2. スクラビングを一時的に無効にします。

   構文

   ceph osd set noscrub
   ceph osd set nodeep-scrub

3. バックフィルおよび復元機能を制限します。

   構文

   ceph tell DAEMON_TYPE.* injectargs --OPTION_NAME VALUE [--OPTION_NAME VALUE]

   例

   [ceph: root@host01 /]# ceph tell osd.* injectargs --osd-max-backfills 1 --osd-recovery-max-active 1 --osd-recovery-op-priority 1

4. ノード上の各 OSD をストレージクラスターから削除します。

   • Ceph Orchestrator を使用した OSD デーモンの削除

     重要

     ストレージクラスターから OSD ノードを削除する場合、Red Hat は、ノード内の一度に 1 つの OSD を削除してから、次の OSD を削除する前にクラスターが active+clean 状態に回復できるようにすることを推奨します。

     1. OSD を削除したら、ストレージクラスターが ほぼ完全比率 に達していないことを確認します。

        構文

        ceph -s
        ceph df

     2. ノードのすべての OSD がストレージクラスターから削除されるまでこの手順を繰り返します。

5. すべての OSD が削除されたら、ホストを削除します。

   • Ceph Orchestrator を使用したホストの削除。

手順

1. ストレージクラスターの容量を確認し、ノードの削除への影響を確認します。

   例

   [ceph: root@host01 /]# ceph df
   [ceph: root@host01 /]# rados df
   [ceph: root@host01 /]# ceph osd df

2. 必要に応じて、復元およびバックフィルを無効にします。

   例

   [ceph: root@host01 /]# ceph osd set noout
   [ceph: root@host01 /]# ceph osd set noscrub
   [ceph: root@host01 /]# ceph osd set nodeep-scrub

3. ノードをシャットダウンします。

4. ホスト名を変更する場合は、CRUSH マップからノードを削除します。

   例

   [ceph: root@host01 /]# ceph osd crush rm host03

5. ストレージクラスターのステータスを確認します。

   例

   [ceph: root@host01 /]# ceph -s

6. ノードにオペレーティングシステムを再インストールします。

7. 新規ノードを追加します。

   • Ceph Orchestrator を使用したホストの追加

8. 必要に応じて、復元およびバックフィルを有効にします。

   例

   [ceph: root@host01 /]# ceph osd unset noout
   [ceph: root@host01 /]# ceph osd unset noscrub
   [ceph: root@host01 /]# ceph osd unset nodeep-scrub

9. Ceph のヘルスを確認します。

   例

   [ceph: root@host01 /]# ceph -s