절차

1. rbd help 명령을 사용하여 특정 rbd 명령과 해당 하위 명령에 대한 도움말을 표시합니다.

   구문

   rbd help COMMAND SUBCOMMAND

2. snap list 명령에 대한 도움말을 표시하려면 다음을 수행합니다.

   [root@rbd-client ~]# rbd help snap list

절차

1. rbd 풀을 만들려면 다음을 실행합니다.

   구문

   ceph osd pool create POOL_NAME PG_NUM
   ceph osd pool application enable POOL_NAME rbd
   rbd pool init -p POOL_NAME

   예제

   [root@rbd-client ~]# ceph osd pool create example 128
   [root@rbd-client ~]# ceph osd pool application enable example rbd
   [root@rbd-client ~]# rbd pool init -p example

절차

1. 블록 장치 이미지를 생성하려면 다음 명령을 실행합니다.

   구문

   rbd create IMAGE_NAME --size MEGABYTES --pool POOL_NAME

   예제

   [root@rbd-client ~]# rbd create data --size 1024 --pool stack

   이 예제에서는 stack 이라는 풀에 정보를 저장하는 data 라는 1GB 이미지를 생성합니다.

   참고

   이미지를 생성하기 전에 풀이 있는지 확인합니다.

절차

1. rbd 풀의 블록 장치를 나열하려면 다음 명령을 실행합니다(rbd 는 기본 풀 이름임).

   [root@rbd-client ~]# rbd ls

2. 특정 풀의 블록 장치를 나열하려면 다음 명령을 실행하되, POOL_NAME 을 풀 이름으로 바꿉니다.

   구문

   rbd ls POOL_NAME

   예제

   [root@rbd-client ~]# rbd ls swimmingpool

절차

1. 특정 이미지에서 정보를 검색하려면 다음 명령을 실행하고 IMAGE_NAME 을 이미지 이름으로 바꿉니다.

   구문

   rbd --image IMAGE_NAME info

   예제

   [root@rbd-client ~]# rbd --image foo info

2. 풀 내에서 이미지에서 정보를 검색하려면 다음 명령을 실행하고 IMAGE_NAME 을 이미지 이름으로 바꾸고 POOL_NAME 을 풀 이름으로 바꿉니다.

   구문

   rbd --image IMAGE_NAME -p POOL_NAME info

   예제

   [root@rbd-client ~]# rbd --image bar -p swimmingpool info

절차

1. Ceph 블록 장치 이미지의 최대 크기를 늘리거나 줄입니다.

   구문

   [root@rbd-client ~]# rbd resize --image IMAGE_NAME --size SIZE

절차

1. 블록 장치를 제거하려면 다음을 실행하되 IMAGE_NAME 을 삭제하려는 이미지 이름으로 교체합니다.

   구문

   rbd rm IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd rm foo

2. 풀에서 블록 장치를 제거하려면 다음을 실행하되 IMAGE_NAME 을 삭제 및 제거할 이미지 이름으로 교체하여 POOL_NAME 을 풀 이름으로 교체합니다.

   구문

   rbd rm IMAGE_NAME -p POOL_NAME

   예제

   [root@rbd-client ~]# rbd rm bar -p swimmingpool

절차

1. 기능을 활성화하려면 다음을 수행합니다.

   구문

   rbd feature enable POOL_NAME/IMAGE_NAME FEATURE_NAME

   1. 데이터 풀의 image1 이미지에서 배타적 잠금 기능을 활성화하려면 다음을 수행합니다.

      예제

      [root@rbd-client ~]# rbd feature enable data/image1 exclusive-lock

      중요

      fast-diff 및 object-map 기능을 활성화하면 오브젝트 맵을 다시 빌드합니다.

      + .Syntax

      rbd object-map rebuild POOL_NAME/IMAGE_NAME

2. 기능을 비활성화하려면 다음을 수행합니다.

   구문

   rbd feature disable POOL_NAME/IMAGE_NAME FEATURE_NAME

   1. 데이터 풀의 image2 이미지에서 fast-diff 기능을 비활성화하려면 다음을 수행합니다.

      예제

      [root@rbd-client ~]# rbd feature disable data/image2 fast-diff

절차

1. 새 메타데이터 키-값 쌍을 설정하려면 다음을 수행합니다.

   구문

   rbd image-meta set POOL_NAME/IMAGE_NAME KEY VALUE

   예제

   [root@rbd-client ~]# rbd image-meta set data/dataset last_update 2016-06-06

   이 예에서는 데이터 풀의 데이터 세트 이미지에 last_update 키를 2016-06-06 값으로 설정합니다.

2. 메타데이터 키-값 쌍을 제거하려면 다음을 수행합니다.

   구문

   rbd image-meta remove POOL_NAME/IMAGE_NAME KEY

   예제

   [root@rbd-client ~]# rbd image-meta remove data/dataset last_update

   이 예제에서는 데이터 풀의 데이터 세트 이미지에서 last_update 키-값 쌍을 제거합니다.

3. 키 값을 보려면 다음을 수행합니다.

   구문

   rbd image-meta get POOL_NAME/IMAGE_NAME KEY

   예제

   [root@rbd-client ~]# rbd image-meta get data/dataset last_update

   이 예제에서는 last_update 키의 값을 봅니다.

4. 이미지의 모든 메타데이터를 표시하려면 다음을 수행합니다.

   구문

   rbd image-meta list POOL_NAME/IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd data/dataset image-meta list

   이 예에서는 데이터 풀의 데이터 세트 이미지에 대한 메타데이터 세트 를 나열합니다.

5. Ceph 구성 파일에 특정 이미지의 RBD 이미지 구성 설정을 재정의하려면 다음을 수행합니다.

   구문

   rbd config image set POOL_NAME/IMAGE_NAME  PARAMETER VALUE

   예제

   [root@rbd-client ~]# rbd config image set data/dataset rbd_cache false

   이 예제에서는 데이터 풀에서 데이터 세트 이미지에 대한 RBD 캐시를 비활성화합니다.

절차

1. 소스 및 대상 이미지를 상호 연결하는 새 대상 이미지를 생성하여 마이그레이션을 준비합니다.

   구문

   rbd migration prepare SOURCE_IMAGE TARGET_IMAGE

   교체:

   • 이동할 이미지 이름이 SOURCE_IMAGE 입니다. POOL/IMAGE_NAME 형식을 사용합니다.
   • 새 이미지 이름으로 TARGET_IMAGE. POOL/IMAGE_NAME 형식을 사용합니다.

   예제

   [root@rbd-client ~]# rbd migration prepare data/source stack/target

2. 새 대상 이미지의 상태를 확인합니다. 준비 됨:

   구문

   rbd status TARGET_IMAGE

   예제

   [root@rbd-client ~]# rbd status stack/target
   Watchers: none
   Migration:
               source: data/source (5e2cba2f62e)
               destination: stack/target (5e2ed95ed806)
               state: prepared

3. 선택적으로 새 대상 이미지 이름을 사용하여 클라이언트를 다시 시작합니다.

4. 대상 이미지에 소스 이미지를 복사합니다.

   구문

   rbd migration execute TARGET_IMAGE

   예제

   [root@rbd-client ~]# rbd migration execute stack/target

5. 마이그레이션이 완료되었는지 확인합니다.

   예제

   [root@rbd-client ~]# rbd status stack/target
   Watchers:
       watcher=1.2.3.4:0/3695551461 client.123 cookie=123
   Migration:
               source: data/source (5e2cba2f62e)
               destination: stack/target (5e2ed95ed806)
               state: executed

6. 소스 이미지와 대상 이미지 간의 교차 링크를 제거하여 마이그레이션을 커밋하고 소스 이미지도 제거됩니다.

   구문

   rbd migration commit TARGET_IMAGE

   예제

   [root@rbd-client ~]# rbd migration commit stack/target

   소스 이미지가 하나 이상의 복제본의 상위인 경우 복제 이미지가 사용되지 않도록 한 후 --force 옵션을 사용합니다.

   예제

   [root@rbd-client ~]# rbd migration commit stack/target --force

7. 준비 단계 후에 클라이언트를 다시 시작하지 않은 경우 새 대상 이미지 이름을 사용하여 클라이언트를 다시 시작합니다.

절차

1. /etc/ceph/rbdmap 구성 파일을 편집하려면 을 엽니다.

2. 구성 파일에 RBD 이미지 또는 이미지를 추가합니다.

   예제

   foo/bar1    id=admin,keyring=/etc/ceph/ceph.client.admin.keyring
   foo/bar2    id=admin,keyring=/etc/ceph/ceph.client.admin.keyring,options='lock_on_read,queue_depth=1024'

3. 구성 파일에 변경 사항을 저장합니다.

4. RBD 매핑 서비스를 활성화합니다.

   예제

   [root@client ~]# systemctl enable rbdmap.service

절차

1. rbd_support Ceph Manager 모듈을 활성화합니다.

   예제

   [user@mon ~]$ ceph mgr module enable rbd_support

2. "iotop" 유형의 이미지를 표시하려면 다음을 수행합니다.

   예제

   [user@mon ~]$ rbd perf image iotop

   참고

   오른쪽 및 왼쪽 화살표 키를 사용하여 ops, read-ops, write-bytes, write-latency 및 read-latency 열을 동적으로 정렬할 수 있습니다.

3. 이미지의 "iostat" 스타일을 표시하려면 다음을 수행합니다.

   예제

   [user@mon ~]$ rbd perf image iostat

   참고

   이 명령의 출력은 JSON 또는 XML 형식일 수 있으며 다른 명령줄 툴을 사용하여 정렬할 수 있습니다.

절차

1. 블록 장치 이미지를 마운트하려면 먼저 이미지 목록을 반환합니다.

   [root@rbd-client ~]# rbd list

절차

1. 커널 모듈에 이미지 이름을 매핑합니다.

   구문

   rbd device map POOL_NAME/IMAGE_NAME --id USER_NAME

   예제

   [root@rbd-client ~]# rbd device map rbd/myimage --id admin

2. 인증 키 또는 시크릿이 포함된 파일을 통해 cephx 인증을 사용할 때 보안을 지정합니다.

   구문

   [root@rbd-client ~]# rbd device map POOL_NAME/IMAGE_NAME --id USER_NAME --keyring PATH_TO_KEYRING

   또는

   [root@rbd-client ~]# rbd device map POOL_NAME/IMAGE_NAME --id USER_NAME --keyfile PATH_TO_FILE

절차

1. 매핑된 블록 장치를 표시합니다.

   [root@rbd-client ~]# rbd device list

절차

1. 블록 장치 이미지를 매핑 해제합니다.

   구문

   rbd device unmap /dev/rbd/POOL_NAME/IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd device unmap /dev/rbd/rbd/foo

절차

1. rbd 풀을 만듭니다.

   구문

   ceph osd pool create POOL_NAME PG_NUM

   예제

   [root@mon ~]# ceph osd pool create mypool 100
   pool 'mypool' created

2. rbd 풀을 RBD 애플리케이션과 연결합니다.

   구문

   ceph osd pool application enable POOL_NAME rbd

   예제

   [root@mon ~]# ceph osd pool application enable mypool rbd
   enabled application 'rbd' on pool 'mypool'

3. RBD 애플리케이션으로 풀을 초기화합니다.

   구문

   rbd pool init -p POOL_NAME

   예제

   [root@mon ~]#  rbd pool init -p mypool

4. 두 개의 네임스페이스를 생성합니다.

   구문

   rbd namespace create --namespace NAMESPACE

   예제

   [root@mon ~]# rbd namespace create --namespace namespace1
   
   [root@mon ~]# rbd namespace create --namespace namespace2
   
   [root@mon ~]# rbd namespace ls --format=json
   [{"name":"namespace2"},{"name":"namespace1"}]

5. 두 사용자의 네임스페이스에 대한 액세스 권한을 제공합니다.

   구문

   ceph auth get-or-create client.USER_NAME mon 'profile rbd' osd 'profile rbd pool=rbd namespace=NAMESPACE' -o /etc/ceph/client.USER_NAME.keyring

   예제

   [root@mon ~]# ceph auth get-or-create client.testuser mon 'profile rbd' osd 'profile rbd pool=rbd namespace=namespace1' -o /etc/ceph/client.testuser.keyring
   
   [root@mon ~]# ceph auth get-or-create client.newuser mon 'profile rbd' osd 'profile rbd pool=rbd namespace=namespace2' -o /etc/ceph/client.newuser.keyring

6. 클라이언트의 키를 가져옵니다.

   구문

   ceph auth get client.USER_NAME

   예제

   [root@mon ~]# ceph auth get client.testuser
   
   [client.testuser]
   	key = AQDMp61hBf5UKRAAgjQ2In0Z3uwAase7mrlKnQ==
   	caps mon = "profile rbd"
   	caps osd = "profile rbd pool=rbd namespace=namespace1"
   exported keyring for client.testuser
   
   [root@mon ~]# ceph auth get client.newuser
   
   [client.newuser]
   	key = AQDfp61hVfLFHRAA7D80ogmZl80ROY+AUG4A+Q==
   	caps mon = "profile rbd"
   	caps osd = "profile rbd pool=rbd namespace=namespace2"
   exported keyring for client.newuser

7. 블록 장치 이미지를 생성하고 풀 내에서 사전 정의된 네임스페이스를 사용합니다.

   구문

   rbd create --namespace NAMESPACE IMAGE_NAME --size SIZE_IN_GB

   예제

   [root@mon ~]# rbd create --namespace namespace1 image01 --size 1G
   
   [root@mon ~]# rbd create --namespace namespace2 image02 --size 1G

8. 선택 사항: 네임스페이스 및 관련 이미지의 세부 정보를 가져옵니다.

   구문

   rbd --namespace NAMESPACE ls --long

   예제

   [root@mon ~]#  rbd --namespace namespace1 ls --long
   NAME    SIZE  PARENT FMT PROT LOCK
   image01 1 GiB          2
   
   [root@mon ~]# rbd --namespace namespace2 ls --long
   NAME    SIZE  PARENT FMT PROT LOCK
   image02 1 GiB          2

9. Ceph Monitor 노드의 Ceph 구성 파일을 클라이언트 노드로 복사합니다.

   scp /etc/ceph/ceph.conf root@CLIENT_NODE:/etc/ceph/

   예제

   [root@mon ~]# scp /etc/ceph/ceph.conf root@host02:/etc/ceph/
   
   root@host02's password:
   ceph.conf                                                                          100%  497   724.9KB/s   00:00

10. Ceph Monitor 노드에서 클라이언트 노드로 관리자 인증 키를 복사합니다.

    구문

    scp /etc/ceph/ceph.client.admin.keyring root@CLIENT_NODE:/etc/ceph

    예제

    [root@mon ~]# scp /etc/ceph/ceph.client.admin.keyring root@host02:/etc/ceph/
    
    root@host02's password:
    ceph.client.admin.keyring                                                          100%  151   265.0KB/s   00:00

11. Ceph 모니터 노드에서 클라이언트 노드로 사용자의 인증 키를 복사합니다.

    구문

    scp /etc/ceph/ceph.client.USER_NAME.keyring root@CLIENT_NODE:/etc/ceph/

    예제

    [root@mon ~]# scp /etc/ceph/client.newuser.keyring root@host02:/etc/ceph/
    
    [root@mon ~]# scp /etc/ceph/client.testuser.keyring root@host02:/etc/ceph/

12. 블록 장치 이미지를 매핑합니다.

    구문

    rbd map --name NAMESPACE IMAGE_NAME -n client.USER_NAME --keyring /etc/ceph/client.USER_NAME.keyring

    예제

    [root@mon ~]# rbd map --namespace namespace1 image01  -n  client.testuser --keyring=/etc/ceph/client.testuser.keyring
    
    /dev/rbd0
    
    [root@mon ~]# rbd map --namespace namespace2 image02 -n client.newuser --keyring=/etc/ceph/client.newuser.keyring
    
    /dev/rbd1

    동일한 풀에 있는 다른 네임스페이스의 사용자에게 액세스할 수 없습니다.

    예제

    [root@mon ~]# rbd map --namespace namespace2 image02  -n  client.testuser --keyring=/etc/ceph/client.testuser.keyring
    
    rbd: warning: image already mapped as /dev/rbd1
    rbd: sysfs write failed
    rbd: error asserting namespace: (1) Operation not permitted
    In some cases useful info is found in syslog - try "dmesg | tail".
    2021-12-06 02:49:08.106 7f8d4fde2500 -1 librbd::api::Namespace: exists: error asserting namespace: (1) Operation not permitted
    rbd: map failed: (1) Operation not permitted
    
    [root@mon ~]# rbd map --namespace namespace1 image01 -n client.newuser --keyring=/etc/ceph/client.newuser.keyring
    
    rbd: warning: image already mapped as /dev/rbd0
    rbd: sysfs write failed
    rbd: error asserting namespace: (1) Operation not permitted
    In some cases useful info is found in syslog - try "dmesg | tail".
    2021-12-03 12:16:24.011 7fcad776a040 -1 librbd::api::Namespace: exists: error asserting namespace: (1) Operation not permitted
    rbd: map failed: (1) Operation not permitted

13. 장치를 확인합니다.

    예제

    [root@mon ~]# rbd showmapped
    
    id pool namespace      image   snap device
    0  rbd  namespace1  image01 -  /dev/rbd0
    1  rbd  namespace2   image02 -  /dev/rbd1

절차

1. snap create 옵션, 풀 이름 및 이미지 이름을 지정합니다.

   구문

   rbd --pool POOL_NAME snap create --snap SNAP_NAME IMAGE_NAME
   rbd snap create POOL_NAME/IMAGE_NAME@SNAP_NAME

   예제

   [root@rbd-client ~]# rbd --pool rbd snap create --snap snapname foo
   [root@rbd-client ~]# rbd snap create rbd/foo@snapname

절차

1. 풀 이름과 이미지 이름을 지정합니다.

   구문

   rbd --pool POOL_NAME snap ls IMAGE_NAME
   rbd snap ls POOL_NAME/IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd --pool rbd snap ls foo
   [root@rbd-client ~]# rbd snap ls rbd/foo

절차

1. snap rollback 옵션, 풀 이름, 이미지 이름 및 스냅 이름을 지정합니다.

   구문

   rbd --pool POOL_NAME snap rollback --snap SNAP_NAME IMAGE_NAME
   rbd snap rollback POOL_NAME/IMAGE_NAME@SNAP_NAME

   예제

   [root@rbd-client ~]# rbd --pool rbd snap rollback --snap snapname foo
   [root@rbd-client ~]# rbd snap rollback rbd/foo@snapname

절차

1. snap rm 옵션, 풀 이름, 이미지 이름 및 스냅샷 이름을 지정합니다.

   구문

   rbd --pool POOL_NAME snap rm --snap SNAP_NAME IMAGE_NAME
   rbd snap rm POOL_NAME-/IMAGE_NAME@SNAP_NAME

   예제

   [root@rbd-client ~]# rbd --pool rbd snap rm --snap snapname foo
   [root@rbd-client ~]# rbd snap rm rbd/foo@snapname

절차

1. snap purge 옵션과 이미지 이름을 지정합니다.

   구문

   rbd --pool POOL_NAME snap purge IMAGE_NAME
   rbd snap purge POOL_NAME/IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd --pool rbd snap purge foo
   [root@rbd-client ~]# rbd snap purge rbd/foo

절차

1. 스냅샷의 이름을 변경하려면 다음을 수행합니다.

   구문

   rbd snap rename POOL_NAME/IMAGE_NAME@ORIGINAL_SNAPSHOT_NAME POOL_NAME/IMAGE_NAME@NEW_SNAPSHOT_NAME

   예제

   [root@rbd-client ~]# rbd snap rename data/dataset@snap1 data/dataset@snap2

   이렇게 하면 데이터 풀에서 데이터 세트 이미지의 snap1 스냅샷의 이름을 snap2 로 변경합니다.

2. rbd help snap rename 명령을 실행하여 스냅샷 이름 바꾸기에 대한 추가 세부 정보를 표시합니다.

절차

1. 다음 명령에 POOL_NAME, IMAGE_NAME 및 SNAP_SHOT_NAME 을 지정합니다.

   구문

   rbd --pool POOL_NAME snap protect --image IMAGE_NAME --snap SNAPSHOT_NAME
   rbd snap protect POOL_NAME/IMAGE_NAME@SNAPSHOT_NAME

   예제

   [root@rbd-client ~]# rbd --pool rbd snap protect --image my-image --snap my-snapshot
   [root@rbd-client ~]# rbd snap protect rbd/my-image@my-snapshot

   참고

   보호된 스냅샷을 삭제할 수 없습니다.

절차

1. 스냅샷을 복제하려면 상위 풀, 스냅샷, 하위 풀 및 이미지 이름을 지정해야 합니다.

   구문

   rbd --pool POOL_NAME --image PARENT_IMAGE --snap SNAP_NAME --dest-pool POOL_NAME --dest CHILD_IMAGE_NAME
   rbd clone POOL_NAME/PARENT_IMAGE@SNAP_NAME  POOL_NAME/CHILD_IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd --pool rbd --image my-image --snap my-snapshot --dest-pool rbd --dest new-image
   [root@rbd-client ~]# rbd clone rbd/my-image@my-snapshot rbd/new-image

절차

1. 다음 명령을 실행합니다.

   구문

   rbd --pool POOL_NAME snap unprotect --image IMAGE_NAME --snap SNAPSHOT_NAME
   rbd snap unprotect POOL_NAME/IMAGE_NAME@SNAPSHOT_NAME

   예제

   [root@rbd-client ~]# rbd --pool rbd snap unprotect --image my-image --snap my-snapshot
   [root@rbd-client ~]# rbd snap unprotect rbd/my-image@my-snapshot

절차

1. 스냅샷의 하위 항목을 나열하려면 다음을 실행합니다.

   구문

   rbd --pool POOL_NAME children --image IMAGE_NAME --snap SNAP_NAME
   rbd children POOL_NAME/IMAGE_NAME@SNAPSHOT_NAME

   예제

   rbd --pool rbd children --image my-image --snap my-snapshot
   rbd children rbd/my-image@my-snapshot

절차

1. 하위 이미지와 연결된 상위 이미지 스냅샷을 삭제하려면 먼저 하위 이미지를 병합해야 합니다.

   구문

   rbd --pool POOL_NAME flatten --image IMAGE_NAME
   rbd flatten POOL_NAME/IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd --pool rbd flatten --image my-image
   [root@rbd-client ~]# rbd flatten rbd/my-image

절차

1. 이미지가 시작된 클러스터에서 이미지에서 배타적 잠금 및 저널링 기능을 활성화합니다.

   1. 새 이미지 의 경우 --image-feature 옵션을 사용합니다.

      구문

      rbd create IMAGE_NAME --size MEGABYTES --pool POOL_NAME --image-feature FEATURE[,FEATURE]

      예제

      [root@rbd-client ~]# rbd create image1 --size 1024 --pool data --image-feature exclusive-lock,journaling

   2. 기존 이미지 의 경우 rbd 기능 enable 명령을 사용합니다.

      구문

      rbd feature enable POOL_NAME/IMAGE_NAME FEATURE_NAME

      예제

      [root@rbd-client ~]# rbd feature enable data/image1 exclusive-lock,journaling

   3. 기본적으로 모든 새 이미지에서 배타적 잠금 및 저널링을 활성화하려면 Ceph 구성 파일에 다음 설정을 추가합니다.

      rbd_default_features = 125

2. site-a 클러스터에서 다음 단계를 완료합니다.

   1. 모니터 노드에서 rbd-mirror 데몬이 클러스터에 연결하는 데 사용할 사용자를 만듭니다. 이 예제에서는 site-a 사용자를 생성하고 이 키를 site-a.client.site-a.keyring 이라는 파일에 출력합니다.

      구문

      ceph auth get-or-create client.CLUSTER_NAME mon 'profile rbd' osd 'profile rbd pool=data' -o /etc/ceph/CLUSTER_NAME.client.USER_NAME.keyring

      예제

      [root@mon ~]# ceph auth get-or-create client.site-a mon 'profile rbd' osd 'profile rbd pool=data' -o /etc/ceph/site-a.client.site-a.keyring

   2. 모니터링 노드에서 Ceph 구성 파일 및 새로 생성된 키 파일을 site-b 모니터 및 클라이언트 노드로 복사합니다.
   3. Ceph 구성 파일의 이름을 ceph.conf 에서 CLUSTER-NAME.conf로 변경합니다. 이 예제에서 파일은 /etc/ceph/site-a.conf 입니다.

3. site-b 클러스터에서 다음 단계를 완료합니다.

   1. Ansible 관리 노드에서 Ansible 인벤토리 파일에 [rbdmirrors] 그룹을 추가합니다. 일반적인 인벤토리 파일은 /etc/ansible/hosts 입니다.

   2. [rbdmirrors] 그룹에서 rbd -mirrors 데몬을 실행할 site-b 클라이언트 노드의 이름을 추가합니다. 데몬은 site-a 에서 site-b 로 이미지 변경 사항을 가져옵니다.

      [rbdmirrors]
      ceph-client

   3. /usr/share/ceph-ansible/ 디렉터리로 이동합니다.

      [root@admin ~]# cd /usr/share/ceph-ansible

   4. group_vars/ rbdmirrors.yml. sample을 group_vars/rbdmirrors.yml 에 복사하여 새 rbdmirrors.yml 파일을 만듭니다.

      [root@admin ceph-ansible]# cp group_vars/rbdmirrors.yml.sample group_vars/rbdmirrors.yml

   5. 편집할 group_vars/rbdmirrors.yml 파일을 엽니다.

   6. ceph_rbd_mirror_configure 를 true 로 설정합니다. ceph_rbd_mirror_pool 을 이미지를 미러링할 풀로 설정합니다. 이 예제에서 데이터 는 풀 이름입니다.

      ceph_rbd_mirror_configure: true
      ceph_rbd_mirror_pool: "data"

   7. 기본적으로 ceph-ansible 은 풀의 모든 이미지를 미러링하는 풀 모드를 사용하여 미러링을 구성합니다. 미러링이 명시적으로 활성화된 이미지만 미러링된 이미지만 활성화하는 이미지 모드를 활성화합니다. 이미지 모드를 활성화하려면 ceph_rbd_mirror_mode 를 image 로 설정합니다.

      ceph_rbd_mirror_mode: image

   8. rbd-mirror 에서 가져올 클러스터의 이름을 설정합니다. 이 예제에서 다른 클러스터는 site-a 입니다.

      ceph_rbd_mirror_remote_cluster: "site-a"

   9. Ansible 관리 노드에서 ceph_rbd_mirror_remote_user 를 사용하여 키의 사용자 이름을 설정합니다. 키를 만들 때 사용한 것과 동일한 이름을 사용합니다. 이러한 예에서 사용자는 client.site-a 라는 이름으로 지정됩니다.

      ceph_rbd_mirror_remote_user: "client.site-a"

   10. ceph-ansible 사용자로 Ansible 플레이북을 실행합니다.

       • 베어 메탈 배포:

         [user@admin ceph-ansible]$ ansible-playbook site.yml --limit rbdmirrors -i hosts

       • 컨테이너 배포:

         [ansible@admin ceph-ansible]$ ansible-playbook site-container.yml --limit rbdmirrors -i hosts

4. site-a 및 site-b 클러스터 모두에서 원하는 이미지에서 미러링을 명시적으로 활성화합니다.

   구문

   저널 기반 미러링:

   rbd mirror image enable POOL/IMAGE

   스냅샷 기반 미러링:

   rbd mirror image enable POOL/IMAGE snapshot

   예제

   [root@mon ~]# rbd mirror image enable data/image1
   [root@mon ~]# rbd mirror image enable data/image1 snapshot

   참고

   새 이미지를 피어 클러스터에 미러링할 때마다 이 단계를 반복합니다.

5. 미러링 상태를 확인합니다. site-b 클러스터의 Ceph Monitor 노드에서 다음 명령을 실행합니다.

   예제

   저널 기반 미러링:

   [root@mon ~]# rbd mirror image status data/image1
   image1:
     global_id:   7d486c3f-d5a1-4bee-ae53-6c4f1e0c8eac
     state:       up+replaying 1
     description: replaying, master_position=[object_number=3, tag_tid=1, entry_tid=3], mirror_position=[object_number=3, tag_tid=1, entry_tid=3], entries_behind_master=0
     last_update: 2019-04-22 13:19:27

   스냅샷 기반 미러링:

   [root@mon ~]# rbd mirror image status data/image1
   image1:
     global_id:   06acc9e6-a63d-4aa1-bd0d-4f3a79b0ae33
     state:       up+replaying 1
     description: replaying, {"bytes_per_second":0.0,"bytes_per_snapshot":0.0,"local_snapshot_timestamp":1642689843,"remote_snapshot_timestamp":1642689843,"replay_state":"idle"}
     service:     admin on ceph-rbd2-vasi-43-5hwia4-node2
     last_update: 2022-01-20 12:41:57

   1 1

   이미지가 up+replaying 에 있는 경우 미러링이 제대로 작동합니다.

   참고

   사이트 간 연결에 따라 미러링은 이미지를 동기화하는 데 시간이 오래 걸릴 수 있습니다.

절차

1. 이미지가 시작된 클러스터에서 이미지에서 배타적 잠금 및 저널링 기능을 활성화합니다.

   1. 새 이미지 의 경우 --image-feature 옵션을 사용합니다.

      구문

      rbd create IMAGE_NAME --size MEGABYTES --pool POOL_NAME --image-feature FEATURE[,FEATURE]

      예제

      [root@rbd-client ~]# rbd create image1 --size 1024 --pool data --image-feature exclusive-lock,journaling

   2. 기존 이미지 의 경우 rbd 기능 enable 명령을 사용합니다.

      구문

      rbd feature enable POOL_NAME/IMAGE_NAME FEATURE_NAME

      예제

      [root@rbd-client ~]# rbd feature enable data/image1 exclusive-lock,journaling

   3. 기본적으로 모든 새 이미지에서 배타적 잠금 및 저널링을 활성화하려면 Ceph 구성 파일에 다음 설정을 추가합니다.

      rbd_default_features = 125

2. site-a 클러스터에서 다음 단계를 완료합니다.

   1. 모니터 노드에서 rbd-mirror 데몬이 클러스터에 연결하는 데 사용할 사용자를 만듭니다. 이 예제에서는 site-a 사용자를 생성하고 해당 키를 site-a.client.site-a.keyring 이라는 파일에 출력하고 Ceph 구성 파일은 /etc/ceph/site-a.conf 입니다.

      구문

      ceph auth get-or-create client.PRIMARY_CLUSTER_NAME mon 'profile rbd' osd 'profile rbd pool=data' -o /etc/ceph/PRIMARY_CLUSTER_NAME.client.USER_NAME.keyring -c /etc/ceph/PRIMARY_CLUSTER_NAME.conf

      예제

      [root@mon ~]# ceph auth get-or-create client.site-a mon 'profile rbd' osd 'profile rbd pool=data' -o /etc/ceph/site-a.client.site-a.keyring -c /etc/ceph/site-a.conf

   2. 인증 키를 site-b 클러스터에 복사합니다. rbd-daemon 이 실행될 site-b 클러스터의 클라이언트 노드에 파일을 복사합니다. 파일을 /etc/ceph/site-a.client.site-a.keyring 에 저장합니다.

      구문

      scp /etc/ceph/PRIMARY_CLUSTER_NAME.client.USER_NAME.keyring root@SECONDARY_CLIENT_NODE_NAME:/etc/ceph/PRIMARY_CLUSTER_NAME.client.USER_NAME.keyring

      예제

      [root@mon ~]# scp /etc/ceph/site-a.client.site-a.keyring root@client.site-b:/etc/ceph/site-a.client.site-a.keyring

   3. 모니터 노드에서 site-b 모니터 노드 및 클라이언트 노드로 Ceph 구성 파일을 복사합니다. 이 예제의 Ceph 구성 파일은 /etc/ceph/site-a.conf 입니다.

      구문

      scp /etc/ceph/PRIMARY_CLUSTER_NAME.conf root@SECONDARY_MONITOR_NODE_NAME:/etc/ceph/PRIMARY_CLUSTER_NAME.conf
      scp /etc/ceph/PRIMARY_CLUSTER_NAME.conf user@SECONDARY_CLIENT_NODE_NAME:/etc/ceph/PRIMARY_CLUSTER_NAME.conf

      예제

      [root@mon ~]# scp /etc/ceph/site-a.conf root@mon.site-b:/etc/ceph/site-a.conf
      [root@mon ~]# scp /etc/ceph/site-a.conf user@client.site-b:/etc/ceph/site-a.conf

3. site-b 클러스터에서 다음 단계를 완료합니다.

   1. site-a 에서 site-b 로 미러링을 구성합니다. Ansible 관리 노드에서 Ansible 인벤토리 파일(일반적으로 /usr/share/ceph-ansible/hosts )에 [rbdmirrors] 그룹을 추가합니다.

   2. [rbdmirrors] 그룹에서 rbd -mirrors 데몬에서 실행할 site-b 클라이언트 노드의 이름을 추가합니다. 이 데몬은 site-a 에서 site-b 로 이미지 변경 사항을 가져옵니다.

      예제

      [rbdmirrors]
      client.site-b

   3. /usr/share/ceph-ansible/ 디렉터리로 이동합니다.

      [root@admin ~]$ cd /usr/share/ceph-ansible

   4. group_vars/ rbdmirrors.yml. sample을 group_vars/rbdmirrors.yml 에 복사하여 새 rbdmirrors.yml 파일을 만듭니다.

      [root@admin ceph-ansible]# cp group_vars/rbdmirrors.yml.sample group_vars/rbdmirrors.yml

   5. group_vars/rbdmirrors.yml 파일을 편집하기 위해 을 엽니다.

   6. ceph_rbd_mirror_configure 를 true 로 설정하고 ceph_rbd_mirror_pool 을 미러할 풀로 설정합니다. 이 예제에서 데이터 는 풀 이름입니다.

      ceph_rbd_mirror_configure: true
      ceph_rbd_mirror_pool: "data"

   7. 기본적으로 ceph-ansible 은 풀의 모든 이미지를 미러링하는 풀 모드를 사용하여 미러링을 구성합니다. 미러링이 명시적으로 활성화된 이미지만 미러링된 이미지만 활성화하는 이미지 모드를 활성화합니다. 이미지 모드를 활성화하려면 ceph_rbd_mirror_mode 를 image 로 설정합니다.

      ceph_rbd_mirror_mode: image

   8. group_vars/rbdmirrors.yml 파일에서 rbd-mirror 에서 클러스터의 이름을 설정합니다. 이 예제에서 다른 클러스터는 site-a 입니다.

      ceph_rbd_mirror_remote_cluster: "site-a"

   9. Ansible 관리 노드에서 group_vars/rbdmirrors.yml 파일에서 ceph_rbd_mirror_remote_user 를 사용하여 키의 사용자 이름을 설정합니다. 키를 만들 때 사용한 것과 동일한 이름을 사용합니다. 이러한 예에서 사용자는 client.site-a 라는 이름으로 지정됩니다.

      ceph_rbd_mirror_remote_user: "client.site-a"

   10. ansible 사용자로 Ansible 플레이북을 실행합니다.

       • 베어 메탈 배포:

         [user@admin ceph-ansible]$ ansible-playbook site.yml --limit rbdmirrors -i hosts

       • 컨테이너 배포:

         [user@admin ceph-ansible]$ ansible-playbook site-container.yml --limit rbdmirrors -i hosts

4. 미러링 상태를 확인합니다. site-b 클러스터의 Ceph Monitor 노드에서 다음 명령을 실행합니다.

   예제

   저널 기반 미러링:

   [root@mon ~]# rbd mirror image status data/image1
   image1:
     global_id:   7d486c3f-d5a1-4bee-ae53-6c4f1e0c8eac
     state:       up+replaying 1
     description: replaying, master_position=[object_number=3, tag_tid=1, entry_tid=3], mirror_position=[object_number=3, tag_tid=1, entry_tid=3], entries_behind_master=0
     last_update: 2021-04-22 13:19:27

   스냅샷 기반 미러링:

   [root@mon ~]# rbd mirror image status data/image1
   image1:
     global_id:   06acc9e6-a63d-4aa1-bd0d-4f3a79b0ae33
     state:       up+replaying 1
     description: replaying, {"bytes_per_second":0.0,"bytes_per_snapshot":0.0,"local_snapshot_timestamp":1642689843,"remote_snapshot_timestamp":1642689843,"replay_state":"idle"}
     service:     admin on ceph-rbd2-vasi-43-5hwia4-node2
     last_update: 2022-01-20 12:41:57

   1 1

   이미지가 up+replaying 에 있는 경우 미러링이 제대로 작동합니다.

   참고

   사이트 간 연결에 따라 미러링은 이미지를 동기화하는 데 시간이 오래 걸릴 수 있습니다.

5. site-b 클러스터에서 다음 단계를 완료합니다. 단계는 주로 위와 동일합니다.

   1. 모니터 노드에서 rbd-mirror 데몬이 클러스터에 연결하는 데 사용할 사용자를 만듭니다. 이 예제에서는 site-b 사용자를 생성하고 해당 키를 site-b.client.site-b.keyring 이라는 파일에 출력하고 Ceph 구성 파일은 /etc/ceph/site-b.conf 입니다.

      구문

      ceph auth get-or-create client.SECONDARY_CLUSTER_NAME mon 'profile rbd' osd 'profile rbd pool=data' -o /etc/ceph/SECONDARY_CLUSTER_NAME.client.USER_NAME.keyring -c /etc/ceph/SECONDARY_CLUSTER_NAME.conf

      예제

      [root@mon ~]# ceph auth get-or-create client.site-b mon 'profile rbd' osd 'profile rbd pool=data' -o /etc/ceph/site-b.client.site-b.keyring -c /etc/ceph/site-b.conf

   2. 인증 키를 site-a 클러스터에 복사합니다. rbd -daemon 이 실행될 클러스터 의 클라이언트 노드에 파일을 복사합니다. 파일을 /etc/ceph/site-b.client.site-b.keyring 에 저장합니다.

      구문

      scp /etc/ceph/SECONDARY_CLUSTER_NAME.client.USER_NAME.keyring root@PRIMARY_CLIENT_NODE_NAME:/etc/ceph/SECONDARY_CLUSTER_NAME.client.USER_NAME.keyring

      예제

      [root@mon ~]# scp /etc/ceph/site-b.client.site-b.keyring root@client.site-a:/etc/ceph/site-b.client.site-b.keyring

   3. 모니터 노드에서 site-a monitor 노드 및 클라이언트 노드로 Ceph 구성 파일을 복사합니다. 이 예제의 Ceph 구성 파일은 /etc/ceph/site-b.conf 입니다.

      구문

      scp /etc/ceph/SECONDARY_CLUSTER_NAME.conf root@PRIMARY_MONITOR_NODE_NAME:/etc/ceph/SECONDARY_CLUSTER_NAME.conf
      scp /etc/ceph/SECONDARY_CLUSTER_NAME.conf user@PRIMARY_CLIENT_NODE_NAME:/etc/ceph/SECONDARY_CLUSTER_NAME.conf

      예제

      [root@mon ~]# scp /etc/ceph/site-b.conf root@mon.site-a:/etc/ceph/site-b.conf
      [root@mon ~]# scp /etc/ceph/site-b.conf user@client.site-a:/etc/ceph/site-b.conf

6. site-a 클러스터에서 다음 단계를 완료합니다.

   1. site-b 에서 site-a 로 미러링을 구성합니다. Ansible 관리 노드에서 Ansible 인벤토리 파일(일반적으로 /usr/share/ceph-ansible/hosts )에 [rbdmirrors] 그룹을 추가합니다.

   2. [rbdmirrors] 그룹에서 rbd -mirrors 데몬에서 실행할 site-a 클라이언트 노드의 이름을 추가합니다. 이 데몬은 site-b 에서 site-a 로 이미지 변경 사항을 가져옵니다.

      예제

      [rbdmirrors]
      client.site-a

   3. /usr/share/ceph-ansible/ 디렉터리로 이동합니다.

      [root@admin ~]# cd /usr/share/ceph-ansible

   4. group_vars/ rbdmirrors.yml. sample을 group_vars/rbdmirrors.yml 에 복사하여 새 rbdmirrors.yml 파일을 만듭니다.

      [root@admin ceph-ansible]# cp group_vars/rbdmirrors.yml.sample group_vars/rbdmirrors.yml

   5. group_vars/rbdmirrors.yml 파일을 편집하기 위해 을 엽니다.

   6. ceph_rbd_mirror_configure 를 true 로 설정하고 ceph_rbd_mirror_pool 을 미러할 풀로 설정합니다. 이 예제에서 데이터 는 풀 이름입니다.

      ceph_rbd_mirror_configure: true
      ceph_rbd_mirror_pool: "data"

   7. 기본적으로 ceph-ansible 은 풀의 모든 이미지를 미러링하는 풀 모드를 사용하여 미러링을 구성합니다. 미러링이 명시적으로 활성화된 이미지만 미러링된 이미지만 활성화하는 이미지 모드를 활성화합니다. 이미지 모드를 활성화하려면 ceph_rbd_mirror_mode 를 image 로 설정합니다.

      ceph_rbd_mirror_mode: image

   8. Ansible 관리 노드에서 group_vars/rbdmirrors.yml 파일에서 rbd-mirror 에서 클러스터의 이름을 설정합니다. 예를 들어 다른 클러스터의 이름은 site-b 입니다.

      ceph_rbd_mirror_remote_cluster: "site-b"

   9. Ansible 관리 노드에서 group_vars/rbdmirrors.yml 파일에서 ceph_rbd_mirror_remote_user 를 사용하여 키의 사용자 이름을 설정합니다. 이 예제에서는 user의 이름은 client.site-b 입니다.

      ceph_rbd_mirror_remote_user: "client.site-b"

   10. 관리 노드에서 Ansible 사용자로 Ansible 플레이북을 실행합니다.

       • 베어 메탈 배포:

         [user@admin ceph-ansible]$ ansible-playbook site.yml --limit rbdmirrors -i hosts

       • 컨테이너 배포:

         [user@admin ceph-ansible]$ ansible-playbook site-container.yml --limit rbdmirrors -i hosts

7. site-a 및 site-b 클러스터 모두에서 원하는 이미지에서 미러링을 명시적으로 활성화합니다.

   구문

   저널 기반 미러링:

   rbd mirror image enable POOL/IMAGE

   스냅샷 기반 미러링:

   rbd mirror image enable POOL/IMAGE snapshot

   예제

   [root@mon ~]# rbd mirror image enable data/image1
   [root@mon ~]# rbd mirror image enable data/image1 snapshot

   참고

   새 이미지를 피어 클러스터에 미러링할 때마다 이 단계를 반복합니다.

8. 미러링 상태를 확인합니다. site-a 클러스터의 클라이언트 노드에서 다음 명령을 실행합니다.

   예제

   저널 기반 미러링:

   [root@mon ~]# rbd mirror image status data/image1
   image1:
     global_id:   08027096-d267-47f8-b52e-59de1353a034
     state:       up+stopped 1
     description: local image is primary
     last_update: 2021-04-16 15:45:31

   스냅샷 기반 미러링:

   [root@mon ~]# rbd mirror image status data/image1
   image1:
     global_id:   47fd1aae-5f19-4193-a5df-562b5c644ea7
     state:       up+stopped 1
     description: local image is primary
     service:     admin on ceph-rbd1-vasi-43-5hwia4-node2
     last_update: 2022-01-20 12:42:54
     peer_sites:
       name: rbd-mirror.site-b
       state: up+replaying
       description: replaying, {"bytes_per_second":0.0,"bytes_per_snapshot":0.0,"local_snapshot_timestamp":1642693094,"remote_snapshot_timestamp":1642693094,"replay_state":"idle"}
       last_update: 2022-01-20 12:42:59
     snapshots:
       5 .mirror.primary.47fd1aae-5f19-4193-a5df-562b5c644ea7.dda146c6-5f21-4e75-ba93-660f6e57e301 (peer_uuids:[bfd09289-c9c9-40c8-b2d3-ead9b6a99a45])

   1 1

   이미지 상태가 up+stopped 이어야 합니다. 여기서 up 은 rbd-mirror 데몬이 실행 중이며 중지됨을 의미합니다. 즉, 이미지가 다른 클러스터의 복제 대상이 아님을 의미합니다. 이는 이미지가 이 클러스터에서 기본 설정이기 때문입니다.

절차

1. site-b 스토리지 클러스터에 연결된 클라이언트 노드에 rbd-mirror 패키지를 설치합니다.

   Red Hat Enterprise Linux 7

   [root@rbd-client ~]# yum install rbd-mirror

   Red Hat Enterprise Linux 8

   [root@rbd-client ~]# dnf install rbd-mirror

   참고

   패키지는 Red Hat Ceph Storage Tools 리포지토리에서 제공됩니다.

2. 이미지에서 배타적 잠금 및 저널링 기능을 활성화합니다.

   1. 새 이미지 의 경우 --image-feature 옵션을 사용합니다.

      구문

      rbd create IMAGE_NAME --size MEGABYTES --pool POOL_NAME --image-feature FEATURE [,FEATURE]

      예제

      [root@rbd-client ~]# rbd create image1 --size 1024 --pool data --image-feature exclusive-lock,journaling

   2. 기존 이미지 의 경우 rbd 기능 enable 명령을 사용합니다.

      구문

      rbd feature enable POOL_NAME/IMAGE_NAME FEATURE [,FEATURE]

      예제

      [root@rbd-client ~]# rbd feature enable data/image1 exclusive-lock,journaling

   3. 기본적으로 모든 새 이미지에서 배타적 잠금 및 저널링을 활성화하려면 Ceph 구성 파일에 다음 설정을 추가합니다.

      rbd_default_features = 125

3. 미러링 모드(풀 또는 이미지 모드)를 선택합니다.

   중요

   스냅샷 기반 미러링에 이미지 모드를 사용합니다.

   1. 풀 모드 활성화:

      구문

      rbd mirror pool enable POOL_NAME MODE

      예제

      [root@rbd-client ~]# rbd mirror pool enable data pool

      이 예제에서는 data 라는 전체 풀을 미러링할 수 있습니다.

   2. 이미지 모드 활성화:

      구문

      rbd mirror pool enable POOL_NAME MODE

      예제

      [root@rbd-client ~]# rbd mirror pool enable data image

      이 예제에서는 data 라는 풀에서 이미지 모드 미러링을 활성화합니다.

   3. 미러링이 성공적으로 활성화되었는지 확인합니다.

      구문

      rbd mirror pool info POOL_NAME

      예제

      [root@rbd-client ~]# rbd mirror pool info data
      Mode: image
      Site Name: 94cbd9ca-7f9a-441a-ad4b-52a33f9b7148
      
      Peer Sites: none

4. site-a 클러스터에서 다음 단계를 완료합니다.

   1. Ceph 클라이언트 노드에서 사용자를 생성합니다.

      구문

      ceph auth get-or-create client.PRIMARY_CLUSTER_NAME mon 'profile rbd-mirror' osd 'profile rbd' -o /etc/ceph/ceph.PRIMARY_CLUSTER_NAME.keyring

      예제

      [root@rbd-client-site-a ~]# ceph auth get-or-create client.rbd-mirror.site-a mon 'profile rbd-mirror' osd 'profile rbd' -o /etc/ceph/ceph.client.rbd-mirror.site-a.keyring

   2. 인증 키를 site-b 클러스터에 복사합니다.

      구문

      scp /etc/ceph/ceph.PRIMARY_CLUSTER_NAME.keyring root@SECONDARY_CLUSTER:_PATH_

      예제

      [root@rbd-client-site-a ~]# scp /etc/ceph/ceph.client.rbd-mirror.site-a.keyring root@rbd-client-site-b:/etc/ceph/

   3. Ceph 클라이언트 노드에서 스토리지 클러스터 피어를 부트스트랩합니다.

      1. 스토리지 클러스터 피어를 풀에 등록합니다.

         구문

         rbd mirror pool peer bootstrap create --site-name LOCAL_SITE_NAME POOL_NAME > PATH_TO_BOOTSTRAP_TOKEN

         예제

         [root@rbd-client-site-a ~]# rbd mirror pool peer bootstrap create --site-name rbd-mirror.site-a data > /root/bootstrap_token_rbd-mirror.site-a

         참고

         이 예제 bootstrap 명령은 client.rbd-mirror-peer Ceph 사용자를 생성합니다.

      2. 부트스트랩 토큰 파일을 site-b 스토리지 클러스터에 복사합니다.

         구문

         scp PATH_TO_BOOTSTRAP_TOKEN root@SECONDARY_CLUSTER:/root/

         예제

         [root@rbd-client-site-a ~]# scp /root/bootstrap_token_site-a root@ceph-rbd2:/root/

5. site-b 클러스터에서 다음 단계를 완료합니다.

   1. 클라이언트 노드에서 사용자를 생성합니다.

      구문

      ceph auth get-or-create client.SECONDARY_CLUSTER_NAME mon 'profile rbd-mirror' osd 'profile rbd' -o /etc/ceph/ceph.SECONDARY_CLUSTER_NAME.keyring

      예제

      [root@rbd-client-site-b ~]# ceph auth get-or-create client.rbd-mirror.site-b mon 'profile rbd-mirror' osd 'profile rbd' -o /etc/ceph/ceph.client.rbd-mirror.site-b.keyring

   2. 인증 키를 Ceph 클라이언트 노드인 site-a 클러스터에 복사합니다.

      구문

      scp /etc/ceph/ceph.SECONDARY_CLUSTER_NAME.keyring root@PRIMARY_CLUSTER:_PATH_

      예제

      [root@rbd-client-site-b ~]# scp /etc/ceph/ceph.client.rbd-mirror.site-b.keyring root@rbd-client-site-a:/etc/ceph/

   3. 부트스트랩 토큰을 가져옵니다.

      구문

      rbd mirror pool peer bootstrap import --site-name LOCAL_SITE_NAME --direction rx-only POOL_NAME PATH_TO_BOOTSTRAP_TOKEN

      예제

      [root@rbd-client-site-b ~]# rbd mirror pool peer bootstrap import --site-name rbd-mirror.site-b --direction rx-only data /root/bootstrap_token_rbd-mirror.site-a

      참고

      단방향 RBD 미러링의 경우 피어를 부트 스트랩할 때 양방향 미러링이 기본값이므로 --direction rx-only 인수를 사용해야 합니다.

   4. 클라이언트 노드에서 rbd-mirror 데몬을 활성화하고 시작합니다.

      구문

      systemctl enable ceph-rbd-mirror.target
      systemctl enable ceph-rbd-mirror@rbd-mirror.CLIENT_ID
      systemctl start ceph-rbd-mirror@rbd-mirror.CLIENT_ID

      CLIENT_ID 를 이전에 만든 Ceph 사용자로 교체합니다.

      예제

      [root@rbd-client-site-b ~]# systemctl enable ceph-rbd-mirror.target
      [root@rbd-client-site-b ~]# systemctl enable ceph-rbd-mirror@rbd-mirror.site-a
      [root@rbd-client-site-b ~]# systemctl start ceph-rbd-mirror@rbd-mirror.site-a

   중요

   각 rbd-mirror 데몬에는 고유한 클라이언트 ID가 있어야 합니다.

6. 미러링 상태를 확인하려면 site-a 및 site-b 클러스터의 Ceph Monitor 노드에서 다음 명령을 실행합니다.

   구문

   rbd mirror image status POOL_NAME/IMAGE_NAME

   예제

   저널 기반 미러링:

   [root@mon-site-a ~]# rbd mirror image status data/image1
   image1:
     global_id:   08027096-d267-47f8-b52e-59de1353a034
     state:       up+stopped 1
     description: local image is primary
     last_update: 2021-04-22 13:45:31

   스냅샷 기반 미러링:

   [root@mon-site-a ~]# rbd mirror image status data/image1
   image1:
     global_id:   47fd1aae-5f19-4193-a5df-562b5c644ea7
     state:       up+stopped 1
     description: local image is primary
     service:     admin on ceph-rbd1-vasi-43-5hwia4-node2
     last_update: 2022-01-20 12:42:54
     peer_sites:
       name: rbd-mirror.site-b
       state: up+replaying
       description: replaying, {"bytes_per_second":0.0,"bytes_per_snapshot":0.0,"local_snapshot_timestamp":1642693094,"remote_snapshot_timestamp":1642693094,"replay_state":"idle"}
       last_update: 2022-01-20 12:42:59
     snapshots:
       5 .mirror.primary.47fd1aae-5f19-4193-a5df-562b5c644ea7.dda146c6-5f21-4e75-ba93-660f6e57e301 (peer_uuids:[bfd09289-c9c9-40c8-b2d3-ead9b6a99a45])

   1 1

   여기서 up 은 rbd-mirror 데몬이 실행 중이며 중지된 것은 이 이미지가 다른 스토리지 클러스터의 복제 대상이 아님을 의미합니다. 이는 이미지가 이 스토리지 클러스터에서 기본 설정이기 때문입니다.

   예제

   저널 기반 미러링:

   [root@mon-site-b ~]# rbd mirror image status data/image1
   image1:
     global_id:   7d486c3f-d5a1-4bee-ae53-6c4f1e0c8eac
     state:       up+replaying 1
     description: replaying, master_position=[object_number=3, tag_tid=1, entry_tid=3], mirror_position=[object_number=3, tag_tid=1, entry_tid=3], entries_behind_master=0
     last_update: 2021-04-22 14:19:27

   스냅샷 기반 미러링:

   [root@mon-site-b ~]# rbd mirror image status data/image1
   image1:
     global_id:   06acc9e6-a63d-4aa1-bd0d-4f3a79b0ae33
     state:       up+replaying 1
     description: replaying, {"bytes_per_second":0.0,"bytes_per_snapshot":0.0,"local_snapshot_timestamp":1642689843,"remote_snapshot_timestamp":1642689843,"replay_state":"idle"}
     service:     admin on ceph-rbd2-vasi-43-5hwia4-node2
     last_update: 2022-01-20 12:41:57

   1 1

   이미지가 up+replaying 에 있는 경우 미러링이 제대로 작동합니다. 여기서 up 은 rbd-mirror 데몬이 실행 중이며 재생을 통해 이 이미지가 다른 스토리지 클러스터에서 복제 대상임을 의미합니다.

   참고

   사이트 간 연결에 따라 미러링은 이미지를 동기화하는 데 시간이 오래 걸릴 수 있습니다.

절차

1. site-a 스토리지 클러스터에 연결된 클라이언트 노드와 site-b 스토리지 클러스터에 연결된 클라이언트 노드에 rbd-mirror 패키지를 설치합니다.

   Red Hat Enterprise Linux 7

   [root@rbd-client ~]# yum install rbd-mirror

   Red Hat Enterprise Linux 8

   [root@rbd-client ~]# dnf install rbd-mirror

   참고

   패키지는 Red Hat Ceph Storage Tools 리포지토리에서 제공됩니다.

2. 이미지에서 배타적 잠금 및 저널링 기능을 활성화합니다.

   1. 새 이미지 의 경우 --image-feature 옵션을 사용합니다.

      구문

      rbd create IMAGE_NAME --size MEGABYTES --pool POOL_NAME --image-feature FEATURE [,FEATURE]

      예제

      [root@rbd-client ~]# rbd create image1 --size 1024 --pool data --image-feature exclusive-lock,journaling

   2. 기존 이미지 의 경우 rbd 기능 enable 명령을 사용합니다.

      구문

      rbd feature enable POOL_NAME/IMAGE_NAME FEATURE [,FEATURE]

      예제

      [root@rbd-client ~]# rbd feature enable data/image1 exclusive-lock,journaling

   3. 기본적으로 모든 새 이미지에서 배타적 잠금 및 저널링을 활성화하려면 Ceph 구성 파일에 다음 설정을 추가합니다.

      rbd_default_features = 125

3. 미러링 모드(풀 또는 이미지 모드)를 선택합니다.

   중요

   스냅샷 기반 미러링에 이미지 모드를 사용합니다.

   1. 풀 모드 활성화:

      구문

      rbd mirror pool enable POOL_NAME MODE

      예제

      [root@rbd-client ~]# rbd mirror pool enable data pool

      이 예제에서는 data 라는 전체 풀을 미러링할 수 있습니다.

   2. 이미지 모드 활성화:

      구문

      rbd mirror pool enable POOL_NAME MODE

      예제

      [root@rbd-client ~]# rbd mirror pool enable data image

      이 예제에서는 data 라는 풀에서 이미지 모드 미러링을 활성화합니다.

   3. 미러링이 성공적으로 활성화되었는지 확인합니다.

      구문

      rbd mirror pool info POOL_NAME

      예제

      [root@rbd-client ~]# rbd mirror pool info data
      Mode: image
      Site Name: 94cbd9ca-7f9a-441a-ad4b-52a33f9b7148
      
      Peer Sites: none

4. site-a 클러스터에서 다음 단계를 완료합니다.

   1. Ceph 클라이언트 노드에서 사용자를 생성합니다.

      구문

      ceph auth get-or-create client.PRIMARY_CLUSTER_NAME mon 'profile rbd-mirror' osd 'profile rbd' -o /etc/ceph/ceph.PRIMARY_CLUSTER_NAME.keyring

      예제

      [root@rbd-client-site-a ~]# ceph auth get-or-create client.rbd-mirror.site-a mon 'profile rbd-mirror' osd 'profile rbd' -o /etc/ceph/ceph.client.rbd-mirror.site-a.keyring

   2. 인증 키를 site-b 클러스터에 복사합니다.

      구문

      scp /etc/ceph/ceph.PRIMARY_CLUSTER_NAME.keyring root@SECONDARY_CLUSTER:_PATH_

      예제

      [root@rbd-client-site-a ~]# scp /etc/ceph/ceph.client.rbd-mirror.site-a.keyring root@rbd-client-site-b:/etc/ceph/

   3. Ceph 클라이언트 노드에서 스토리지 클러스터 피어를 부트스트랩합니다.

      1. 스토리지 클러스터 피어를 풀에 등록합니다.

         구문

         rbd mirror pool peer bootstrap create --site-name LOCAL_SITE_NAME POOL_NAME > PATH_TO_BOOTSTRAP_TOKEN

         예제

         [root@rbd-client-site-a ~]# rbd mirror pool peer bootstrap create --site-name rbd-mirror.site-a data > /root/bootstrap_token_rbd-mirror.site-a

         참고

         이 예제 bootstrap 명령은 client.rbd-mirror-peer Ceph 사용자를 생성합니다.

      2. 부트스트랩 토큰 파일을 site-b 스토리지 클러스터에 복사합니다.

         구문

         scp PATH_TO_BOOTSTRAP_TOKEN root@SECONDARY_CLUSTER:/root/

         예제

         [root@rbd-client-site-a ~]# scp /root/bootstrap_token_site-a root@ceph-rbd2:/root/

5. site-b 클러스터에서 다음 단계를 완료합니다.

   1. 클라이언트 노드에서 사용자를 생성합니다.

      구문

      ceph auth get-or-create client.SECONDARY_CLUSTER_NAME mon 'profile rbd-mirror' osd 'profile rbd' -o /etc/ceph/ceph.SECONDARY_CLUSTER_NAME.keyring

      예제

      [root@rbd-client-site-b ~]# ceph auth get-or-create client.rbd-mirror.site-b mon 'profile rbd-mirror' osd 'profile rbd' -o /etc/ceph/ceph.client.rbd-mirror.site-b.keyring

   2. 인증 키를 Ceph 클라이언트 노드인 site-a 클러스터에 복사합니다.

      구문

      scp /etc/ceph/ceph.SECONDARY_CLUSTER_NAME.keyring root@PRIMARY_CLUSTER:_PATH_

      예제

      [root@rbd-client-site-b ~]# scp /etc/ceph/ceph.client.rbd-mirror.site-b.keyring root@rbd-client-site-a:/etc/ceph/

   3. 부트스트랩 토큰을 가져옵니다.

      구문

      rbd mirror pool peer bootstrap import --site-name LOCAL_SITE_NAME --direction rx-tx POOL_NAME PATH_TO_BOOTSTRAP_TOKEN

      예제

      [root@rbd-client-site-b ~]# rbd mirror pool peer bootstrap import --site-name rbd-mirror.site-b --direction rx-tx data /root/bootstrap_token_rbd-mirror.site-a

      참고

      양방향 미러링은 피어를 부트 스트랩할 때 기본 설정이므로 --direction 인수는 선택 사항입니다.

6. 기본 및 보조 클라이언트 노드에서 rbd-mirror 데몬을 활성화하고 시작합니다.

   구문

   systemctl enable ceph-rbd-mirror.target
   systemctl enable ceph-rbd-mirror@rbd-mirror.CLIENT_ID
   systemctl start ceph-rbd-mirror@rbd-mirror.CLIENT_ID

   CLIENT_ID 를 이전에 만든 Ceph 사용자로 교체합니다.

   예제

   [root@rbd-client-site-a ~]# systemctl enable ceph-rbd-mirror.target
   [root@rbd-client-site-a ~]# systemctl enable ceph-rbd-mirror@rbd-mirror.site-a
   [root@rbd-client-site-a ~]# systemctl start ceph-rbd-mirror@rbd-mirror.site-a
   [root@rbd-client-site-a ~]# systemctl enable ceph-rbd-mirror@rbd-mirror.site-b
   [root@rbd-client-site-a ~]# systemctl start ceph-rbd-mirror@rbd-mirror.site-b

   위의 예에서 사용자는 기본 클러스터 사이트-a에서 사용하도록 설정되어 있습니다.

   예제

   [root@rbd-client-site-b ~]# systemctl enable ceph-rbd-mirror.target
   [root@rbd-client-site-b ~]# systemctl enable ceph-rbd-mirror@rbd-mirror.site-a
   [root@rbd-client-site-b ~]# systemctl start ceph-rbd-mirror@rbd-mirror.site-a
   [root@rbd-client-site-b ~]# systemctl enable ceph-rbd-mirror@rbd-mirror.site-b
   [root@rbd-client-site-b ~]# systemctl start ceph-rbd-mirror@rbd-mirror.site-b

   위의 예에서 사용자는 보조 클러스터 site-b에서 사용하도록 설정되어 있습니다.

   중요

   각 rbd-mirror 데몬에는 고유한 클라이언트 ID가 있어야 합니다.

7. 미러링 상태를 확인하려면 site-a 및 site-b 클러스터의 Ceph Monitor 노드에서 다음 명령을 실행합니다.

   구문

   rbd mirror image status POOL_NAME/IMAGE_NAME

   예제

   저널 기반 미러링:

   [root@mon-site-a ~]# rbd mirror image status data/image1
   image1:
     global_id:   08027096-d267-47f8-b52e-59de1353a034
     state:       up+stopped 1
     description: local image is primary
     last_update: 2021-04-22 13:45:31

   스냅샷 기반 미러링:

   [root@mon-site-a ~]# rbd mirror image status data/image1
   image1:
     global_id:   47fd1aae-5f19-4193-a5df-562b5c644ea7
     state:       up+stopped 1
     description: local image is primary
     service:     admin on ceph-rbd1-vasi-43-5hwia4-node2
     last_update: 2022-01-20 12:42:54
     peer_sites:
       name: rbd-mirror.site-b
       state: up+replaying
       description: replaying, {"bytes_per_second":0.0,"bytes_per_snapshot":0.0,"local_snapshot_timestamp":1642693094,"remote_snapshot_timestamp":1642693094,"replay_state":"idle"}
       last_update: 2022-01-20 12:42:59
     snapshots:
       5 .mirror.primary.47fd1aae-5f19-4193-a5df-562b5c644ea7.dda146c6-5f21-4e75-ba93-660f6e57e301 (peer_uuids:[bfd09289-c9c9-40c8-b2d3-ead9b6a99a45])

   1 1

   여기서 up 은 rbd-mirror 데몬이 실행 중이며 중지된 것은 이 이미지가 다른 스토리지 클러스터의 복제 대상이 아님을 의미합니다. 이는 이미지가 이 스토리지 클러스터에서 기본 설정이기 때문입니다.

   예제

   저널 기반 미러링:

   [root@mon-site-b ~]# rbd mirror image status data/image1
   image1:
     global_id:   7d486c3f-d5a1-4bee-ae53-6c4f1e0c8eac
     state:       up+replaying 1
     description: replaying, master_position=[object_number=3, tag_tid=1, entry_tid=3], mirror_position=[object_number=3, tag_tid=1, entry_tid=3], entries_behind_master=0
     last_update: 2021-04-22 14:19:27

   스냅샷 기반 미러링:

   [root@mon-site-b ~]# rbd mirror image status data/image1
   image1:
     global_id:   06acc9e6-a63d-4aa1-bd0d-4f3a79b0ae33
     state:       up+replaying 1
     description: replaying, {"bytes_per_second":0.0,"bytes_per_snapshot":0.0,"local_snapshot_timestamp":1642689843,"remote_snapshot_timestamp":1642689843,"replay_state":"idle"}
     service:     admin on ceph-rbd2-vasi-43-5hwia4-node2
     last_update: 2022-01-20 12:41:57

   1 1

   이미지가 up+replaying 에 있는 경우 미러링이 제대로 작동합니다. 여기서 up 은 rbd-mirror 데몬이 실행 중이며 재생을 통해 이 이미지가 다른 스토리지 클러스터에서 복제 대상임을 의미합니다.

   참고

   사이트 간 연결에 따라 미러링은 이미지를 동기화하는 데 시간이 오래 걸릴 수 있습니다.

절차

1. 서비스를 시작하려면 다음을 수행합니다.

   # systemctl start rbd-target-api
   # systemctl start rbd-target-gw

2. 서비스를 다시 시작하려면 다음을 수행합니다.

   # systemctl restart rbd-target-api
   # systemctl restart rbd-target-gw

3. 서비스를 다시 로드하려면 다음을 수행합니다.

   # systemctl reload rbd-target-api
   # systemctl reload rbd-target-gw

   reload 요청은 rbd-target-api 가 구성을 다시 읽고 현재 실행 중인 환경에 적용합니다. 변경 사항은 Ansible에서 모든 iSCSI 게이트웨이 노드로 병렬로 배포되므로 일반적으로 필요하지 않습니다.

4. 서비스를 중지하려면 다음을 수행합니다.

   # systemctl stop rbd-target-api
   # systemctl stop rbd-target-gw

   stop 요청은 게이트웨이의 포털 인터페이스를 종료하여 클라이언트에 대한 연결을 삭제하고 커널에서 현재 Linux iSCSI 대상 구성을 삭제합니다. 그러면 iSCSI 게이트웨이가 clean 상태로 반환됩니다. 클라이언트가 연결이 끊어지면 활성 I/O가 클라이언트 측 다중 경로 계층에 의해 다른 iSCSI 게이트웨이로 다시 예약됩니다.

절차

1. iSCSI 게이트웨이 명령줄 인터페이스를 시작합니다.

   [root@iscsigw ~]# gwcli

2. 이니시에이터가 iSCSI 타겟에 연결되어 있는지 확인합니다.

   /> goto hosts
   /iscsi-target...csi-igw/hosts> ls
   o- hosts .............................. [Hosts: 1: Auth: None]
     o- iqn.1994-05.com.redhat:rh7-client  [LOGGED-IN, Auth: None, Disks: 0(0.00Y)]

   이니시에이터 상태는 연결된 경우 LOGGED-IN 입니다.

3. LUN이 iSCSI 게이트웨이 간에 균형을 이루는지 확인합니다.

   /> goto hosts
   /iscsi-target...csi-igw/hosts> ls
   o- hosts ................................. [Hosts: 2: Auth: None]
     o- iqn.2005-03.com.ceph:esx ............ [Auth: None, Disks: 4(310G)]
     | o- lun 0 ............................. [rbd.disk_1(100G), Owner: ceph-gw-1]
     | o- lun 1 ............................. [rbd.disk_2(10G), Owner: ceph-gw-2]

   디스크를 만들 때 매핑된 LUN 수가 가장 낮은 게이트웨이에 따라 디스크에 iSCSI 게이트웨이가 소유자 로 할당됩니다. 이 번호가 균형을 맞추면 라운드 로빈 할당에 따라 게이트웨이가 할당됩니다. 현재 LUN 분산은 동적이지 않으며 사용자가 선택할 수 없습니다.

   이니시에이터가 대상에 로그인하고 다중 경로 계층이 최적화된 상태이면 이니시에이터의 운영 체제 다중 경로 유틸리티에서 소유자 게이트웨이의 경로를 ALUAAOptimized(AOptimized) 상태로 보고합니다. 다중 경로 유틸리티는 다른 경로를 ALUA Active-non-Optimized (ANO) 상태로 보고합니다.

   AO 경로가 실패하면 다른 iSCSI 게이트웨이 중 하나가 사용됩니다. 장애 조치 게이트웨이의 순서는 일반적으로 시작자의 다중 경로 계층에 따라 달라집니다. 이 순서는 먼저 검색된 경로를 기반으로 합니다.

절차

1. 올바른 iSCSI 게이트웨이 노드가 Ansible 인벤토리 파일(/etc/ansible/hosts)에 나열되어 있는지 확인합니다.

2. 롤링 업그레이드 플레이북을 실행합니다.

   [admin@ansible ceph-ansible]$ ansible-playbook rolling_update.yml

3. 적절한 플레이북을 실행하여 업그레이드를 완료합니다.

   베어메탈 배포

   [admin@ansible ceph-ansible]$ ansible-playbook site.yml --limit iscsigws -i hosts

   컨테이너 배포

   [admin@ansible ceph-ansible]$ ansible-playbook site-container.yml --limit iscsigws -i hosts

절차

1. iSCSI 게이트웨이 패키지를 업데이트합니다.

   [root@iscsigw ~]# yum update ceph-iscsi

2. iSCSI 게이트웨이 데몬을 중지합니다.

   [root@iscsigw ~]# systemctl stop rbd-target-api
   [root@iscsigw ~]# systemctl stop rbd-target-gw

3. iSCSI 게이트웨이 데몬이 완전히 중지되었는지 확인합니다.

   [root@iscsigw ~]# systemctl status rbd-target-gw

   1. rbd-target-gw 서비스가 성공적으로 중지되면 4 단계로 건너뜁니다.

   2. rbd-target-gw 서비스가 중지되지 않으면 다음 단계를 수행합니다.

      1. targetcli 패키지가 설치되지 않은 경우 targetcli 패키지를 설치합니다.

         [root@iscsigw ~]# yum install targetcli

      2. 기존 대상 오브젝트를 확인합니다.

         [root@iscsigw ~]# targetcli ls

         예제

         o- / ............................................................. [...]
         o- backstores .................................................... [...]
         | o- user:rbd ..................................... [Storage Objects: 0]
         o- iscsi .................................................. [Targets: 0]

         backstores 및 Storage Objects 이 비어 있으면 iSCSI 대상이 완전히 종료되고 4 단계로 건너뛸 수 있습니다.

      3. 대상 오브젝트가 여전히 있는 경우 다음 명령을 사용하여 모든 대상 오브젝트를 강제로 제거합니다.

         [root@iscsigw ~]# targetcli clearconfig confirm=True

         주의

         iSCSI 대상을 여러 서비스에서 사용하는 경우 targetcli 를 대화형 모드로 사용하여 특정 오브젝트를 삭제합니다.

4. tcmu-runner 패키지를 업데이트합니다.

   [root@iscsigw ~]# yum update tcmu-runner

5. tcmu-runner 서비스를 중지합니다.

   [root@iscsigw ~]# systemctl stop tcmu-runner

6. iSCSI 게이트웨이 서비스를 다음 순서로 다시 시작합니다.

   [root@iscsigw ~]# systemctl start tcmu-runner
   [root@iscsigw ~]# systemctl start rbd-target-gw
   [root@iscsigw ~]# systemctl start rbd-target-api

절차

1. iSCSI 게이트웨이 명령줄 유틸리티를 실행합니다.

   [root@iscsigw ~]# gwcli

2. 호스트를 제거합니다.

   구문

   /> cd /iscsi-target/iqn.2003-01.com.redhat.iscsi-gw:$TARGET_NAME/hosts
   /> /iscsi-target...TARGET_NAME/hosts> delete CLIENT_NAME

   TARGET_NAME 을 구성된 iSCSI 대상 이름으로 바꾸고 CLIENT_NAME 을 iSCSI 이니시에이터 이름으로 교체합니다. 예를 들면 다음과 같습니다.

   예제

   /> cd /iscsi-target/iqn.2003-01.com.redhat.iscsi-gw:ceph-igw/hosts
   /> /iscsi-target...eph-igw/hosts> delete iqn.1994-05.com.redhat:rh7-client

3. 디스크를 제거합니다.

   구문

   /> cd /disks/
   /disks> delete POOL_NAME.IMAGE_NAME

   POOL_NAME 을 풀 이름으로, IMAGE_NAME 을 이미지 이름으로 바꿉니다.

   예제

   /> cd /disks/
   /disks> delete rbd.disk_1

4. 루트 사용자로, 컨테이너화된 배포 의 경우 iSCSI 게이트웨이 노드에서 모든 Red Hat Ceph Storage 툴과 리포지토리가 활성화되었는지 확인합니다.

   Red Hat Enterprise Linux 7

   [root@admin ~]# subscription-manager repos --enable=rhel-7-server-rpms
   [root@admin ~]# subscription-manager repos --enable=rhel-7-server-extras-rpms
   [root@admin ~]# subscription-manager repos --enable=rhel-7-server-rhceph-4-tools-rpms --enable=rhel-7-server-ansible-2.9-rpms

   Red Hat Enterprise Linux 8

   [root@admin ~]# subscription-manager repos --enable=rhel-8-for-x86_64-baseos-rpms
   [root@admin ~]# subscription-manager repos --enable=rhel-8-for-x86_64-appstream-rpms
   [root@admin ~]# subscription-manager repos --enable=rhceph-4-tools-for-rhel-8-x86_64-rpms --enable=ansible-2.9-for-rhel-8-x86_64-rpms

   참고

   베어 메탈 배포의 경우 클라이언트 설치를 통해 Ceph 도구가 활성화됩니다.

5. 각 iSCSI 게이트웨이 노드에서 ceph-common 및 ceph-iscsi 패키지를 설치합니다.

   Red Hat Enterprise Linux 7

   [root@admin ~]# yum install -y ceph-common
   [root@admin ~]# yum install -y ceph-iscsi

   Red Hat Enterprise Linux 8

   [root@admin ~]# dnf install -y ceph-common
   [root@admin ~]# dnf install -y ceph-iscsi

6. yum history list 명령을 실행하고 ceph-iscsi 설치의 트랜잭션 ID를 가져옵니다.

7. Ansible 사용자로 전환합니다.

   예제

   [root@admin ~]# su ansible

8. /usr/share/ceph-ansible/ 디렉터리로 이동합니다.

   예제

   [ansible@admin ~]# cd /usr/share/ceph-ansible

9. ansible 사용자로 iSCSI 게이트웨이를 실행하면 Ansible Playbook을 삭제합니다.

   [ansible@admin ceph-ansible]$ ansible-playbook purge-iscsi-gateways.yml

10. 메시지가 표시되면 제거 유형을 입력합니다.

    lio

    이 모드에서는 정의된 모든 iSCSI 게이트웨이에서 Linux iSCSI 대상 구성이 제거됩니다. 생성된 디스크는 Ceph 스토리지 클러스터에서 그대로 유지됩니다.

    all

    모두 선택되면 iSCSI 게이트웨이 환경에 정의된 모든 RBD 이미지와 함께 Linux iSCSI 대상 구성이 제거되며 다른 관련 없는 RBD 이미지는 제거되지 않습니다. 이 작업에서는 데이터를 삭제하므로 올바른 모드를 선택해야 합니다.

    예제

    [ansible@rh7-iscsi-client ceph-ansible]$ ansible-playbook purge-iscsi-gateways.yml
    Which configuration elements should be purged? (all, lio or abort) [abort]: all
    
    
    PLAY [Confirm removal of the iSCSI gateway configuration] *********************
    
    
    GATHERING FACTS ***************************************************************
    ok: [localhost]
    
    
    TASK: [Exit playbook if user aborted the purge] *******************************
    skipping: [localhost]
    
    
    TASK: [set_fact ] *************************************************************
    ok: [localhost]
    
    
    PLAY [Removing the gateway configuration] *************************************
    
    
    GATHERING FACTS ***************************************************************
    ok: [ceph-igw-1]
    ok: [ceph-igw-2]
    
    
    TASK: [igw_purge | purging the gateway configuration] *************************
    changed: [ceph-igw-1]
    changed: [ceph-igw-2]
    
    
    TASK: [igw_purge | deleting configured rbd devices] ***************************
    changed: [ceph-igw-1]
    changed: [ceph-igw-2]
    
    
    PLAY RECAP ********************************************************************
    ceph-igw-1                 : ok=3    changed=2    unreachable=0    failed=0
    ceph-igw-2                 : ok=3    changed=2    unreachable=0    failed=0
    localhost                  : ok=2    changed=0    unreachable=0    failed=0

11. 활성 컨테이너가 제거되었는지 확인합니다.

    Red Hat Enterprise Linux 7

    [root@admin ~]# docker ps

    Red Hat Enterprise Linux 8

    [root@admin ~]# podman ps

    Ceph iSCSI 컨테이너 ID가 제거됩니다.

12. 선택사항: ceph-iscsi 패키지를 제거합니다.

    구문

    yum history undo TRANSACTION_ID

    예제

    [root@admin ~]# yum history undo 4

    주의

    ceph-common 패키지를 제거하지 마십시오. 이렇게 하면 /etc/ceph 의 콘텐츠가 제거되고 시작할 수 없는 노드의 데몬이 렌더링됩니다.