手順

1. max_mds パラメーターには、アクティブな MDS デーモンの数を設定してください。

   構文

   ceph fs set NAME max_mds NUMBER

   例

   [root@mon ~]# ceph fs set cephfs max_mds 2

   この例では、cephfs という CephFS でアクティブな MDS デーモンの数を 2 つに増やしています。

   注記

   Ceph は、新しいランクを取るために予備の MDS デーモンが利用できる場合にのみ、CephFS の実際のランク数を増やします。

2. アクティブな MDS デーモンの数を確認します。

   構文

   ceph fs status NAME

   例

   [root@mon ~]# ceph fs status cephfs
   cephfs - 0 clients
   ======
   +------+--------+-------+---------------+-------+-------+
   | Rank | State  |  MDS  |    Activity   |  dns  |  inos |
   +------+--------+-------+---------------+-------+-------+
   |  0   | active | node1 | Reqs:    0 /s |   10  |   12  |
   |  1   | active | node2 | Reqs:    0 /s |   10  |   12  |
   +------+--------+-------+---------------+-------+-------+
   +-----------------+----------+-------+-------+
   |       Pool      |   type   |  used | avail |
   +-----------------+----------+-------+-------+
   | cephfs_metadata | metadata | 4638  | 26.7G |
   |   cephfs_data   |   data   |    0  | 26.7G |
   +-----------------+----------+-------+-------+
   
   +-------------+
   | Standby MDS |
   +-------------+
   |    node3    |
   +-------------+

手順

1. 特定の CephFS のスタンバイデーモンの予想数を設定します。

   構文

   ceph fs set FS_NAME standby_count_wanted NUMBER

   注記

   NUMBER を 0 にすると、デーモンのヘルスチェックが無効になります。

   例

   [root@mon]# ceph fs set cephfs standby_count_wanted 2

   この例では、予想されるスタンバイデーモンの数を 2 に設定しています。

手順

1. 特定の CephFS の standby-replay を設定します。

   構文

   ceph fs set FS_NAME allow_standby_replay 1

   例

   [root@mon]# ceph fs set cephfs allow_standby_replay 1

   この例では、ブール値が 1 であるため、standby-replay デーモンをアクティブな Ceph MDS デーモンに割り当てることができます。

   注記

   ブール値 allow_standby_replay を 0 に戻すと、新しい standby-replay デーモンが割り当てられなくなるだけです。実行中のデーモンも停止するには、ceph mds fail コマンドで failed とマークします。

手順

1. max_mds パラメーターで指定された MDS デーモンの数を設定します。

   構文

   ceph fs status NAME

   例

   [root@mon ~]# ceph fs status cephfs
   cephfs - 0 clients
   
   +------+--------+-------+---------------+-------+-------+
   | Rank | State  |  MDS  |    Activity   |  dns  |  inos |
   +------+--------+-------+---------------+-------+-------+
   |  0   | active | node1 | Reqs:    0 /s |   10  |   12  |
   |  1   | active | node2 | Reqs:    0 /s |   10  |   12  |
   +------+--------+-------+---------------+-------+-------+
   +-----------------+----------+-------+-------+
   |       Pool      |   type   |  used | avail |
   +-----------------+----------+-------+-------+
   | cephfs_metadata | metadata | 4638  | 26.7G |
   |   cephfs_data   |   data   |    0  | 26.7G |
   +-----------------+----------+-------+-------+
   
   +-------------+
   | Standby MDS |
   +-------------+
   |    node3    |
   +-------------+

2. 管理機能を持つノードで、max_mds パラメーターを必要なアクティブな MDS デーモンの数に変更します。

   構文

   ceph fs set NAME max_mds NUMBER

   例

   [root@mon ~]# ceph fs set cephfs max_mds 1

3. Ceph File System のステータスを監視して、ストレージクラスターが新しい max_mds 値を安定させるのを待機します。

4. アクティブな MDS デーモンの数を確認します。

   構文

   ceph fs status NAME

   例

   [root@mon ~]# ceph fs status cephfs
   cephfs - 0 clients
   
   +------+--------+-------+---------------+-------+-------+
   | Rank | State  |  MDS  |    Activity   |  dns  |  inos |
   +------+--------+-------+---------------+-------+-------+
   |  0   | active | node1 | Reqs:    0 /s |   10  |   12  |
   +------+--------+-------+---------------+-------+-------+
   +-----------------+----------+-------+-------+
   |       Pool      |   type   |  used | avail |
   +-----------------+----------+-------+-------+
   | cephfs_metadata | metadata | 4638  | 26.7G |
   |   cephfs_data   |   data   |    0  | 26.7G |
   +-----------------+----------+-------+-------+
   
   +-------------+
   | Standby MDS |
   +-------------+
   |    node3    |
   |    node2    |
   +-------------+

手順

1. プールを 2 つ作成します。1 つはデータの保存用で、もう 1 つはメタデータの保存用です。

   構文

   ceph osd pool create NAME _PG_NUM

   例

   [root@mon ~]# ceph osd pool create cephfs_data 64
   [root@mon ~]# ceph osd pool create cephfs_metadata 64

   通常、メタデータプールは、データプールよりもオブジェクトがはるかに少ないため、控えめな数の配置グループ (PG) で開始できます。必要に応じて PG の数を増やすことができます。64 PG から 512 PG に推奨されるメタデータプールサイズの範囲。データプールのサイズは、ファイルシステム内で予想されるファイルの数とサイズに比例します。

   重要

   メタデータプールでは、以下を使用することを検討してください。

   • このプールへのデータ損失によりファイルシステム全体にアクセスできなくなる可能性があるため、レプリケーションレベルが高くなります。
   • Solid-State Drive (SSD) ディスクなどのレイテンシーが低くなるストレージ。これは、クライアントで観察されるファイルシステム操作のレイテンシーに直接影響するためです。

2. CephFS を作成します。

   構文

   ceph fs new NAME METADATA_POOL DATA_POOL

   例

   [root@mon ~]# ceph fs new cephfs cephfs_metadata cephfs_data

3. 設定に応じて、1 つ以上の MDS が active の状態に入力されていることを確認します。

   構文

   ceph fs status NAME

   例

   [root@mon ~]# ceph fs status cephfs
   cephfs - 0 clients
   ======
   +------+--------+-------+---------------+-------+-------+
   | Rank | State  |  MDS  |    Activity   |  dns  |  inos |
   +------+--------+-------+---------------+-------+-------+
   |  0   | active | node1 | Reqs:    0 /s |   10  |   12  |
   +------+--------+-------+---------------+-------+-------+
   +-----------------+----------+-------+-------+
   |       Pool      |   type   |  used | avail |
   +-----------------+----------+-------+-------+
   | cephfs_metadata | metadata | 4638  | 26.7G |
   |   cephfs_data   |   data   |    0  | 26.7G |
   +-----------------+----------+-------+-------+
   
   +-------------+
   | Standby MDS |
   +-------------+
   |    node3    |
   |    node2    |
   +-------------+----

手順

1. CephFS メタデータ用にレプリケートされたメタデータプールを作成します。

   構文

   ceph osd pool create METADATA_POOL PG_NUM

   例

   [root@mon ~]# ceph osd pool create cephfs-metadata 64

   この例では、64 個の配置グループを持つ cephfs-metadata という名前のプールを作成します。

2. CephFS のデフォルトの複製データプールを作成します。

   構文

   ceph osd pool create DATA_POOL PG_NUM

   例

   [root@mon ~]# ceph osd pool create cephfs-data 64

   この例では、64 個の配置グループを持つ cephfs-metadata という名前のレプリケートされたプールを作成します。

3. CephFS 用のイレイジャーコーディングデータプールを作成します。

   構文

   ceph osd pool create DATA_POOL PG_NUM erasure

   例

   [root@mon ~]# ceph osd pool create cephfs-data-ec 64 erasure

   この例では、64 個の配置グループを持つ cephfs-metadata という名前のイレイジャーコーディングプールを作成します。

4. 消去コード化されたプールでのオーバーライトを有効にします。

   構文

   ceph osd pool set DATA_POOL allow_ec_overwrites true

   例

   [root@mon ~]# ceph osd pool set cephfs-data-ec allow_ec_overwrites true

   この例では、cephfs-data-ec という名前のイレイジャーコーディングプールで上書きを有効にします。

5. イレイジャーコーディングされたデータプールを CephFS Metadata Server (MDS) に追加します。

   構文

   ceph fs add_data_pool cephfs-ec DATA_POOL

   例

   [root@mon ~]# ceph fs add_data_pool cephfs-ec cephfs-data-ec

   1. 必要に応じて、データプールが追加されたことを確認します。

      [root@mon ~]# ceph fs ls

6. CephFS を作成します。

   構文

   ceph fs new cephfs METADATA_POOL DATA_POOL

   例

   [root@mon ~]# ceph fs new cephfs cephfs-metadata cephfs-data

   重要

   デフォルトのデータプールにイレイジャーコーディングプールを使用することは推奨されていません。

7. イレイジャーコーディングを使用して CephFS を作成します。

   構文

   ceph fs new cephfs-ec METADATA_POOL DATA_POOL

   例

   [root@mon ~]# ceph fs new cephfs-ec cephfs-metadata cephfs-data-ec

8. Ceph FS Metadata Servers (MDS) がアクティブな状態になっていることを確認します。

   構文

   ceph fs status FS_EC

   例

   [root@mon ~]# ceph fs status cephfs-ec
   cephfs-ec - 0 clients
   ======
   +------+--------+-------+---------------+-------+-------+
   | Rank | State  |  MDS  |    Activity   |  dns  |  inos |
   +------+--------+-------+---------------+-------+-------+
   |  0   | active | node1 | Reqs:    0 /s |   10  |   12  |
   +------+--------+-------+---------------+-------+-------+
   +-----------------+----------+-------+-------+
   |       Pool      |   type   |  used | avail |
   +-----------------+----------+-------+-------+
   | cephfs-metadata | metadata | 4638  | 26.7G |
   |  cephfs-data    |   data   |    0  | 26.7G |
   |  cephfs-data-ec |   data   |    0  | 26.7G |
   +-----------------+----------+-------+-------+
   
   +-------------+
   | Standby MDS |
   +-------------+
   |    node3    |
   |    node2    |
   +-------------+

9. 新しいイレイジャーコーディングされたデータプールを既存のファイルシステムに追加します。

   1. CephFS 用のイレイジャーコーディングデータプールを作成します。

      構文

      ceph osd pool create DATA_POOL PG_NUM erasure

      例

      [root@mon ~]# ceph osd pool create cephfs-data-ec1 64 erasure

   2. 消去コード化されたプールでのオーバーライトを有効にします。

      構文

      ceph osd pool set DATA_POOL allow_ec_overwrites true

      例

      [root@mon ~]# ceph osd pool set cephfs-data-ec1 allow_ec_overwrites true

   3. イレイジャーコーディングされたデータプールを CephFS Metadata Server (MDS) に追加します。

      構文

      ceph fs add_data_pool cephfs-ec DATA_POOL

      例

      [root@mon ~]# ceph fs add_data_pool cephfs-ec cephfs-data-ec1

10. イレイジャーコーディングを使用して CephFS を作成します。

    構文

    ceph fs new cephfs-ec METADATA_POOL DATA_POOL

    例

    [root@mon ~]# ceph fs new cephfs-ec cephfs-metadata cephfs-data-ec1

手順

1. Ceph Monitor ノードで、クライアントユーザーを作成します。

   構文

   ceph fs authorize FILE_SYSTEM_NAME client.CLIENT_NAME /DIRECTORY CAPABILITY [/DIRECTORY CAPABILITY] ...

   • クライアントを、ファイルシステム cephfs_a の temp ディレクトリーでのみ書き込みするよう制限するには、以下を実行します。

     例

     [root@mon ~]# ceph fs authorize cephfs_a client.1 / r /temp rw
     
     client.1
       key: AQBSdFhcGZFUDRAAcKhG9Cl2HPiDMMRv4DC43A==
       caps: [mds] allow r, allow rw path=/temp
       caps: [mon] allow r
       caps: [osd] allow rw tag cephfs data=cephfs_a

   • クライアントを temp ディレクトリーに完全に制限するには、root (/) ディレクトリーを削除します。

     例

     [root@mon ~]# ceph fs authorize cephfs_a client.1 /temp rw

   注記

   ファイルシステム名、all またはアスタリスク (*) をファイルシステム名として指定することにより、すべてのファイルシステムへのアクセスが付与されます。通常、シェルから保護するには、アスタリスクを引用符で囲む必要があります。

2. 作成したキーを確認します。

   構文

   ceph auth get client.ID

   例

   [root@mon ~]# ceph auth get client.1

3. キーリングをクライアントにコピーします。

   1. Ceph Monitor ノードで、キーリングをファイルにエクスポートします。

      構文

      ceph auth get client.ID -o ceph.client.ID.keyring

      例

      [root@mon ~]# ceph auth get client.1 -o ceph.client.1.keyring
      exported keyring for client.1

   2. Ceph Monitor ノードからクライアントノードの /etc/ceph/ ディレクトリーに、クライアントキーリングをコピーします。

      構文

      scp root@MONITOR_NODE_NAME:/root/ceph.client.1.keyring /etc/ceph/

      Replace_MONITOR_NODE_NAME_ を Ceph Monitor ノード名または IP に置き換えます。

      例

      [root@client ~]# scp root@mon:/root/ceph.client.1.keyring /etc/ceph/ceph.client.1.keyring

4. キーリングファイルに適切なパーミッションを設定します。

   構文

   chmod 644 KEYRING

   例

   [root@client ~]# chmod 644 /etc/ceph/ceph.client.1.keyring

手順

1. Ceph Storage クラスターを使用するようにクライアントノードを設定します。

   1. Red Hat Ceph Storage 4 Tools リポジトリーを有効にします。

      Red Hat Enterprise Linux 7

      [root@client ~]# subscription-manager repos --enable=rhel-7-server-rhceph-4-tools-rpms

      Red Hat Enterprise Linux 8

      [root@client ~]# subscription-manager repos --enable=rhceph-4-tools-for-rhel-8-x86_64-rpms

   2. ceph-common パッケージをインストールします。

      Red Hat Enterprise Linux 7

      [root@client ~]# yum install ceph-common

      Red Hat Enterprise Linux 8

      [root@client ~]# dnf install ceph-common

   3. Ceph クライアントキーリングを Ceph Monitor ノードからクライアントノードにコピーします。

      構文

      scp root@MONITOR_NODE_NAME:/etc/ceph/KEYRING_FILE /etc/ceph/

      MONITOR_NODE_NAME は、Ceph Monitor ホスト名または IP アドレスに置き換えます。

      例

      [root@client ~]# scp root@192.168.0.1:/etc/ceph/ceph.client.1.keyring /etc/ceph/

   4. Ceph 設定ファイルを Monitor ノードからクライアントノードにコピーします。

      構文

      scp root@MONITOR_NODE_NAME:/etc/ceph/ceph.conf /etc/ceph/ceph.conf

      MONITOR_NODE_NAME は、Ceph Monitor ホスト名または IP アドレスに置き換えます。

      例

      [root@client ~]# scp root@192.168.0.1:/etc/ceph/ceph.conf /etc/ceph/ceph.conf

   5. 設定ファイルに適切なパーミッションを設定します。

      [root@client ~]# chmod 644 /etc/ceph/ceph.conf

2. クライアントノードにマウントディレクトリーを作成します。

   構文

   mkdir -p MOUNT_POINT

   例

   [root@client]# mkdir -p /mnt/cephfs

3. Ceph ファイルシステムをマウントします。複数の Ceph Monitor アドレスを指定するには、mount コマンドでコンマで区切って、マウントポイントを指定し、クライアント名を設定します。

   注記

   Red Hat Ceph Storage 4.1 の時点で、mount.ceph はキーリングファイルを直接読み取りできます。そのため、シークレットファイルは不要になりました。name=CLIENT_ID でクライアント ID を指定すると、mount.ceph は適切なキーリングファイルを検索します。

   構文

   mount -t ceph MONITOR-1_NAME:6789,MONITOR-2_NAME:6789,MONITOR-3_NAME:6789:/ MOUNT_POINT -o name=CLIENT_ID

   例

   [root@client ~]# mount -t ceph mon1:6789,mon2:6789,mon3:6789:/ /mnt/cephfs -o name=1

   注記

   1 つのホスト名が複数の IP アドレスに解決するように DNS サーバーを設定できます。次に、コンマ区切りリストを指定する代わりに、mount コマンドでその 1 つのホスト名を使用できます。

   注記

   また、Monitor ホスト名は :/ に置き換えられ、mount.ceph は Ceph 設定ファイルを読み取り、どのモニターに接続するかを判断することもできます。

4. ファイルシステムが正常にマウントされていることを確認します。

   構文

   stat -f MOUNT_POINT

   例

   [root@client ~]# stat -f /mnt/cephfs

手順

1. Ceph Storage クラスターを使用するようにクライアントノードを設定します。

   1. Red Hat Ceph Storage 4 Tools リポジトリーを有効にします。

      Red Hat Enterprise Linux 7

      [root@client ~]# subscription-manager repos --enable=rhel-7-server-rhceph-4-tools-rpms

      Red Hat Enterprise Linux 8

      [root@client ~]# subscription-manager repos --enable=rhceph-4-tools-for-rhel-8-x86_64-rpms

   2. ceph-fuse パッケージをインストールします。

      Red Hat Enterprise Linux 7

      [root@client ~]# yum install ceph-fuse

      Red Hat Enterprise Linux 8

      [root@client ~]# dnf install ceph-fuse

   3. Ceph クライアントキーリングを Ceph Monitor ノードからクライアントノードにコピーします。

      構文

      scp root@MONITOR_NODE_NAME:/etc/ceph/KEYRING_FILE /etc/ceph/

      MONITOR_NODE_NAME は、Ceph Monitor ホスト名または IP アドレスに置き換えます。

      例

      [root@client ~]# scp root@192.168.0.1:/etc/ceph/ceph.client.1.keyring /etc/ceph/

   4. Ceph 設定ファイルを Monitor ノードからクライアントノードにコピーします。

      構文

      scp root@MONITOR_NODE_NAME:/etc/ceph/ceph.conf /etc/ceph/ceph.conf

      MONITOR_NODE_NAME は、Ceph Monitor ホスト名または IP アドレスに置き換えます。

      例

      [root@client ~]# scp root@192.168.0.1:/etc/ceph/ceph.conf /etc/ceph/ceph.conf

   5. 設定ファイルに適切なパーミッションを設定します。

      [root@client ~]# chmod 644 /etc/ceph/ceph.conf

   6. automatically または manually のいずれかを選択します。

Manually Mounting

2. クライアントノードで、マウントポイントのディレクトリーを作成します。

   構文

   mkdir PATH_TO_MOUNT_POINT

   例

   [root@client ~]# mkdir /mnt/mycephfs

   注記

   MDS 機能で path オプションを使用した場合、マウントポイントは path で指定されたもの内になければなりません。

3. ceph-fuse ユーティリティーを使用して Ceph ファイルシステムをマウントします。

   構文

   ceph-fuse -n client.CLIENT_ID MOUNT_POINT

   例

   [root@client ~]# ceph-fuse -n client.1 /mnt/mycephfs

   注記

   /etc/ceph/ceph.client.CLIENT_ID.keyring であるユーザーキーリングのデフォルト名と場所を使用しない場合は --keyring オプションを使用してユーザーキーリングへのパスを指定します。以下に例を示します。

   例

   [root@client ~]# ceph-fuse -n client.1 --keyring=/etc/ceph/client.1.keyring /mnt/mycephfs

   注記

   -r オプションを使用して、そのパスを root として処理するように指示します。

   構文

   ceph-fuse -n client.CLIENT_ID MOUNT_POINT -r PATH

   例

   [root@client ~]# ceph-fuse -n client.1 /mnt/cephfs -r /home/cephfs

4. ファイルシステムが正常にマウントされていることを確認します。

   構文

   stat -f MOUNT_POINT

   例

   [user@client ~]$ stat -f /mnt/cephfs

自動マウント

2. クライアントノードで、マウントポイントのディレクトリーを作成します。

   構文

   mkdir PATH_TO_MOUNT_POINT

   例

   [root@client ~]# mkdir /mnt/mycephfs

   注記

   MDS 機能で path オプションを使用した場合、マウントポイントは path で指定されたもの内になければなりません。

3. 以下のように /etc/fstab ファイルを編集します。

   構文

   #DEVICE                 PATH           TYPE          OPTIONS                  DUMP  FSCK
   HOST_NAME:_PORT_,     MOUNT_POINT  fuse.ceph     ceph.id=CLIENT_ID,        0     0
   HOST_NAME:_PORT_,                                  ceph.client_mountpoint=/VOL/SUB_VOL_GROUP/SUB_VOL/UID_SUB_VOL,
   HOST_NAME:_PORT_:/                                 [ADDITIONAL_OPTIONS]

   最初の列は、Ceph Monitor ホスト名とポート番号を設定します。

   2 列目は マウントポイントを設定します。

   3 列目は、ファイルシステムのタイプ (ここでは CephFS 用 fuse.ceph) を設定します。

   4 番目のコラム は、それぞれ name および secretfile オプションを使用してユーザー名やシークレットファイルなどのさまざまなオプションを設定します。ceph.client_mountpoint オプションを使用して、特定のボリューム、サブボリューム、およびサブボリュームを設定できます。ネットワークサブシステムの開始後にファイルシステムがマウントされ、ハングやネットワークの問題を回避するために、_netdev オプションを設定します。アクセス時間情報が必要ない場合は、noatime オプションを設定するとパフォーマンスが向上します。

   5 番目のコラムと 6 番目のコラム をゼロに設定します。

   例

   #DEVICE         PATH              TYPE         OPTIONS         DUMP  FSCK
   mon1:6789,      /mnt/cephfs       fuse.ceph    ceph.id=1,         0     0
   mon2:6789,                                     ceph.client_mountpoint=/my_vol/my_sub_vol_group/my_sub_vol/0,
   mon3:6789:/                                    _netdev,defaults

   Ceph File System は、次回のシステム起動時にマウントされます。

手順

1. カーネルクライアントとしてマウントされている Ceph File System をアンマウントするには、以下を実行します。

   構文

   umount MOUNT_POINT

   例

   [root@client ~]# umount /mnt/cephfs

手順

1. FUSE にマウントされた Ceph File System をアンマウントするには、以下を実行します。

   構文

   fusermount -u MOUNT_POINT

   例

   [root@client ~]# fusermount -u /mnt/cephfs

手順

1. Ceph ユーザーのケイパビリティーに p フラグを追加します。

   構文

   ceph fs authorize FILE_SYSTEM_NAME client.CLIENT_NAME /DIRECTORY CAPABILITY [/DIRECTORY CAPABILITY] ...

   例

   [user@client ~]$ ceph fs authorize cephfs_a client.1 /temp rwp
   
   client.1
     key: AQBSdFhcGZFUDRAAcKhG9Cl2HPiDMMRv4DC43A==
     caps: [mds] allow r, allow rwp path=/temp
     caps: [mon] allow r
     caps: [osd] allow rw tag cephfs data=cephfs_a

2. ディレクトリーに ceph.dir.pin 拡張属性を設定します。

   構文

   setfattr -n ceph.dir.pin -v RANK DIRECTORY

   例

   [user@client ~]$ setfattr -n ceph.dir.pin -v 2 /temp

   この例では、/temp ディレクトリーとそのすべてのサブディレクトリーを rank 2 に割り当てます。

手順

1. ディレクトリーの ceph.dir.pin 拡張属性を -1 に設定します。

   構文

   setfattr -n ceph.dir.pin -v -1 DIRECTORY

   例

   [user@client ~]$ serfattr -n ceph.dir.pin -v -1 /home/ceph-user

   注記

   /home/ceph-user/ の個別にマッピングされたサブディレクトリーは影響を受けません。

手順

1. 新しいデータプールを作成します。

   構文

   ceph osd pool create POOL_NAME PG_NUMBER

   以下を置き換えます。

   • POOL_NAME は、プールの名前に置き換えます。
   • PG_NUMBER は配置グループ (PG) の数に置き換えます。

   例

   [root@mon ~]# ceph osd pool create cephfs_data_ssd 64
   pool 'cephfs_data_ssd' created

2. メタデータサーバーの制御の下に、新たに作成されたプールを追加します。

   構文

   ceph fs add_data_pool FS_NAME POOL_NAME

   以下を置き換えます。

   • FS_NAME は、ファイルシステムの名前に置き換えます。
   • POOL_NAME は、プールの名前に置き換えます。

   たとえば、以下のようになります。

   [root@mon ~]# ceph fs add_data_pool cephfs cephfs_data_ssd
   added data pool 6 to fsmap

3. プールが正常に追加されたことを確認します。

   例

   [root@mon ~]# ceph fs ls
   name: cephfs, metadata pool: cephfs_metadata, data pools: [cephfs_data cephfs_data_ssd]

4. cephx 認証を使用する場合は、クライアントが新しいプールにアクセスできることを確認してください。

手順

1. CephFS クラスターが停止しているには、以下を実行します。

   構文

   ceph fs set FS_NAME down true

   例

   [root@mon]# ceph fs set cephfs down true

   1. CephFS クラスターを起動するには、以下をバックアップします。

      構文

      ceph fs set FS_NAME down false

      例

      [root@mon]# ceph fs set cephfs down false

   または

1. CephFS クラスターを迅速に停止するには、以下を実行します。

   構文

   ceph fs fail FS_NAME

   例

   [root@mon]# ceph fs fail cephfs

手順

1. CephFS ステータスを表示して MDS ランクを確認します。

   構文

   ceph fs status

   例

   [root@mon ~]# ceph fs status
   cephfs - 0 clients
   ======
   +------+--------+----------------+---------------+-------+-------+
   | Rank | State  |      MDS       |    Activity   |  dns  |  inos |
   +------+--------+----------------+---------------+-------+-------+
   |  0   | active | cluster1-node6 | Reqs:    0 /s |   10  |   13  |
   +------+--------+----------------+---------------+-------+-------+
   +-----------------+----------+-------+-------+
   |       Pool      |   type   |  used | avail |
   +-----------------+----------+-------+-------+
   | cephfs_metadata | metadata | 2688k | 15.0G |
   |   cephfs_data   |   data   |    0  | 15.0G |
   +-----------------+----------+-------+-------+
   +----------------+
   |  Standby MDS   |
   +----------------+
   | cluster1-node5 |
   +----------------+

   上記の例では、ランクは 0 です。

2. CephFS をダウンとしてマークします。

   構文

   ceph fs set FS_NAME down true

   FS_NAME を、削除する CephFS の名前に置き換えます。

   例

   [root@mon]# ceph fs set cephfs down true
   marked down

3. CephFS のステータスを表示して、停止しているかどうかを判断します。

   構文

   ceph fs status

   例

   [root@mon ~]# ceph fs status
   cephfs - 0 clients
   ======
   +------+----------+----------------+----------+-------+-------+
   | Rank |  State   |      MDS       | Activity |  dns  |  inos |
   +------+----------+----------------+----------+-------+-------+
   |  0   | stopping | cluster1-node6 |          |   10  |   12  |
   +------+----------+----------------+----------+-------+-------+
   +-----------------+----------+-------+-------+
   |       Pool      |   type   |  used | avail |
   +-----------------+----------+-------+-------+
   | cephfs_metadata | metadata | 2688k | 15.0G |
   |   cephfs_data   |   data   |    0  | 15.0G |
   +-----------------+----------+-------+-------+
   +----------------+
   |  Standby MDS   |
   +----------------+
   | cluster1-node5 |
   +----------------+

   しばらくすると、MDS は一覧表示されなくなります。

   例

   [root@mon ~]# ceph fs status
   cephfs - 0 clients
   ======
   +------+-------+-----+----------+-----+------+
   | Rank | State | MDS | Activity | dns | inos |
   +------+-------+-----+----------+-----+------+
   +------+-------+-----+----------+-----+------+
   +-----------------+----------+-------+-------+
   |       Pool      |   type   |  used | avail |
   +-----------------+----------+-------+-------+
   | cephfs_metadata | metadata | 2688k | 15.0G |
   |   cephfs_data   |   data   |    0  | 15.0G |
   +-----------------+----------+-------+-------+
   +----------------+
   |  Standby MDS   |
   +----------------+
   | cluster1-node5 |
   +----------------+

4. ステップ 1 のステータスで、MDS のランクがすべて表示されます。

   構文

   ceph mds fail RANK

   RANK を、MDS デーモンのランクに置き換え、失敗します。

   例

   [root@mon]# ceph mds fail 0

5. CephFS を削除します。

   構文

   ceph fs rm FS_NAME --yes-i-really-mean-it

   FS_NAME は、削除する Ceph File System の名前に置き換えます。

   例

   [root@mon]# ceph fs rm cephfs --yes-i-really-mean-it

6. ファイルシステムが削除されていることを確認します。

   構文

   ceph fs ls

   例

   [root@mon ~]# ceph fs ls
   No filesystems enabled

7. オプション: CephFS が使用したプールを削除します。

   1. Ceph Monitor ノードで、プールを一覧表示します。

      構文

      ceph osd pool ls

      例

      [root@mon ~]# ceph osd pool ls
      rbd
      cephfs_data
      cephfs_metadata

      この出力例では、cephfs_metadata および cephfs_data は CephFS によって使用されたプールです。

   2. メタデータプールを削除します。

      構文

      ceph osd pool delete CEPH_METADATA_POOL CEPH_METADATA_POOL --yes-i-really-really-mean-it

      プール名を 2 回追加することで、CEPH_METADATA_POOL をメタデータストレージに使用されるプール CephFS に置き換えます。

      例

      [root@mon ~]# ceph osd pool delete cephfs_metadata cephfs_metadata --yes-i-really-really-mean-it
      pool 'cephfs_metadata' removed

   3. データプールを削除します。

      構文

      ceph osd pool delete CEPH_DATA_POOL CEPH_DATA_POOL --yes-i-really-really-mean-it

      プール名を 2 回追加することで、CEPH_DATA_POOL をデータストレージに使用するプール CephFS に置き換えます。

      例

      [root@mon ~]# ceph osd pool delete cephfs_data cephfs_data --yes-i-really-really-mean-it
      pool 'cephfs_data' removed

手順

1. /usr/share/ceph-ansible ディレクトリーに移動します。

   [admin@admin ~]$ cd /usr/share/ceph-ansible

2. Ansible インベントリーファイルの [mdss] セクションを確認して、Ceph Metadata Server (MDS) ノードを特定します。Ansible 管理ノードで /usr/share/ceph-ansible/hosts を開きます。

   例

   [mdss]
   cluster1-node5
   cluster1-node6

   この例では、cluster1-node5 および cluster1-node6 は MDS ノードです。

3. max_mds パラメーターを 1 に設定します。

   構文

   ceph fs set NAME max_mds NUMBER

   例

   [root@mon ~]# ceph fs set cephfs max_mds 1

4. 削除するメタデータサーバー (MDS) を指定して、Playbook shrink-mds.yml を実行します。

   構文

   ansible-playbook infrastructure-playbooks/shrink-mds.yml -e mds_to_kill=MDS_NODE -i hosts

   MDS_NODE を、削除するメタデータサーバーノードに置き換えます。Ansible Playbook から、クラスターを縮小するかどうかを尋ねられます。yes と入力して、Enter キーを押します。

   例

   [admin@admin ceph-ansible]$ ansible-playbook infrastructure-playbooks/shrink-mds.yml -e mds_to_kill=cluster1-node6 -i hosts

5. オプション: 追加の MDS ノードのプロセスを繰り返します。

   構文

   ansible-playbook infrastructure-playbooks/shrink-mds.yml -e mds_to_kill=MDS_NODE -i hosts

   MDS_NODE を、削除するメタデータサーバーノードに置き換えます。Ansible Playbook から、クラスターを縮小するかどうかを尋ねられます。yes と入力して、Enter キーを押します。

   例

   [admin@admin ceph-ansible]$ ansible-playbook infrastructure-playbooks/shrink-mds.yml -e mds_to_kill=cluster1-node5 -i hosts

6. CephFS のステータスを確認します。

   構文

   ceph fs status

   例

   [root@mon ~]# ceph fs status
   cephfs - 0 clients
   ======
   +------+--------+----------------+---------------+-------+-------+
   | Rank | State  |      MDS       |    Activity   |  dns  |  inos |
   +------+--------+----------------+---------------+-------+-------+
   |  0   | failed | cluster1-node6 | Reqs:    0 /s |   10  |   13  |
   +------+--------+----------------+---------------+-------+-------+
   +-----------------+----------+-------+-------+
   |       Pool      |   type   |  used | avail |
   +-----------------+----------+-------+-------+
   | cephfs_metadata | metadata | 2688k | 15.0G |
   |   cephfs_data   |   data   |    0  | 15.0G |
   +-----------------+----------+-------+-------+
   +----------------+
   |  Standby MDS   |
   +----------------+
   | cluster1-node5 |
   +----------------+

7. mdss セクションとその中のノードを Ansible インベントリーファイルから削除して、site.yml または site-container.yml Playbook の今後の実行でメタデータサーバーとして再プロビジョニングされないようにします。Ansible インベントリーファイル /usr/share/ceph-ansible/hosts を編集するために開きます。

   例

   [mdss]
   cluster1-node5
   cluster1-node6

   [mdss] セクションと、その下のすべてのノードを削除します。

8. CephFS を削除します。

   構文

   ceph fs rm FS_NAME --yes-i-really-mean-it

   FS_NAME は、削除する Ceph File System の名前に置き換えます。

   例

   [root@mon]# ceph fs rm cephfs --yes-i-really-mean-it

9. オプション: CephFS が使用したプールを削除します。

   1. Ceph Monitor ノードで、プールを一覧表示します。

      構文

      ceph osd pool ls

      CephFS が使用したプールを見つけます。

      例

      [root@mon ~]# ceph osd pool ls
      rbd
      cephfs_data
      cephfs_metadata

      この出力例では、cephfs_metadata および cephfs_data は CephFS によって使用されたプールです。

   2. メタデータプールを削除します。

      構文

      ceph osd pool delete CEPH_METADATA_POOL CEPH_METADATA_POOL --yes-i-really-really-mean-it

      プール名を 2 回追加することで、CEPH_METADATA_POOL をメタデータストレージに使用されるプール CephFS に置き換えます。

      例

      [root@mon ~]# ceph osd pool delete cephfs_metadata cephfs_metadata --yes-i-really-really-mean-it
      pool 'cephfs_metadata' removed

   3. データプールを削除します。

      構文

      ceph osd pool delete CEPH_DATA_POOL CEPH_DATA_POOL --yes-i-really-really-mean-it

      プール名を 2 回追加することで、CEPH_METADATA_POOL をメタデータストレージに使用されるプール CephFS に置き換えます。

      例

      [root@mon ~]# ceph osd pool delete cephfs_data cephfs_data --yes-i-really-really-mean-it
      pool 'cephfs_data' removed

   4. そのプールが存在しないことを確認します。

      例

      [root@mon ~]# ceph osd pool ls
      rbd

      cephfs_metadata プールおよび cephfs_data プールは一覧表示されなくなりました。

手順

1. クライアントの最小バージョンを設定します。

   ceph fs set name min_compat_client release

   name を Ceph File System の名前に置き換え、release を最小クライアントバージョンに置き換えます。たとえば、クライアントが最低限の cephfs Ceph File System で nautilus のアップストリームバージョンを使用するようにクライアントを制限する場合は、以下を実行します。

   $ ceph fs set cephfs min_compat_client nautilus

   使用可能な値の完全なリストと、その値が Red Hat CephStorage のバージョンとどのように対応するかについては、表4.1「min_compat_client 値」を参照してください。

手順

1. デーモンが失敗するには、以下を実行します。

   構文

   ceph mds fail MDS_NAME

   MDS_NAME は、MDS ノード standby-replay の名前です。

   例

   [root@mds ~]# ceph mds fail example01

   注記

   Ceph MDS 名は、ceph fs status コマンドで確認することができます。

手順

1. クライアントリストを確認します。

   構文

   ceph tell DAEMON_NAME client ls

   例

   [root@mon]# ceph tell mds.0 client ls
   [
       {
           "id": 4305,
           "num_leases": 0,
           "num_caps": 3,
           "state": "open",
           "replay_requests": 0,
           "completed_requests": 0,
           "reconnecting": false,
           "inst": "client.4305 172.21.9.34:0/422650892",
           "client_metadata": {
               "ceph_sha1": "ae81e49d369875ac8b569ff3e3c456a31b8f3af5",
               "ceph_version": "ceph version 12.0.0-1934-gae81e49 (ae81e49d369875ac8b569ff3e3c456a31b8f3af5)",
               "entity_id": "0",
               "hostname": "senta04",
               "mount_point": "/tmp/tmpcMpF1b/mnt.0",
               "pid": "29377",
               "root": "/"
           }
       }
   ]

2. 指定した CephFS クライアントをエビクトします。

   構文

   ceph tell DAEMON_NAME client evict id=ID_NUMBER

   例

   [root@mon]# ceph tell mds.0 client evict id=4305

手順

1. ブラックリストを確認します。

   例

   [root@mon]# ceph osd blacklist ls
   listed 1 entries
   127.0.0.1:0/3710147553 2020-03-19 11:32:24.716146

2. ブラックリストから CephFS クライアントを削除します。

   構文

   ceph osd blacklist rm CLIENT_NAME_OR_IP_ADDR

   例

   [root@mon]# ceph osd blacklist rm 127.0.0.1:0/3710147553
   un-blacklisting 127.0.0.1:0/3710147553

3. 必要に応じて、ブラックリストから FUSE ベースの CephFS クライアントを削除するときに自動的に再接続を試みるようにするには、以下を実行します。FUSE クライアントで、以下のオプションを true に設定します。

   client_reconnect_stale = true