6.5. 재해에서 복구

절차

1. 기본 이미지를 사용하는 모든 클라이언트를 중지합니다. 이 단계는 이미지를 사용하는 클라이언트에 따라 다릅니다. 예를 들어 이미지를 사용하는 OpenStack 인스턴스에서 볼륨을 분리합니다.

2. site-a 클러스터의 모니터 노드에서 다음 명령을 실행하여 site-a 클러스터에 있는 기본 이미지를 시연합니다.

   구문

   rbd mirror image demote POOL_NAME/IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd mirror image demote data/image1
   [root@rbd-client ~]# rbd mirror image demote data/image2

3. site-b 클러스터의 모니터 노드에서 다음 명령을 실행하여 site-b 클러스터에 있는 비기본 이미지를 승격합니다.

   구문

   rbd mirror image promote POOL_NAME/IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd mirror image promote data/image1
   [root@rbd-client ~]# rbd mirror image promote data/image2

4. 잠시 후 site-b 클러스터의 모니터 노드에서 이미지 상태를 확인합니다. up+stopped 상태로 표시되고 primary로 나열되어야 합니다.

   [root@rbd-client ~]# rbd mirror image status data/image1
   image1:
     global_id:   08027096-d267-47f8-b52e-59de1353a034
     state:       up+stopped
     description: local image is primary
     last_update: 2019-04-17 16:04:37
   [root@rbd-client ~]# rbd mirror image status data/image2
   image2:
     global_id:   596f41bc-874b-4cd4-aefe-4929578cc834
     state:       up+stopped
     description: local image is primary
     last_update: 2019-04-17 16:04:37

5. 이미지에 대한 액세스를 다시 시작합니다. 이 단계는 이미지를 사용하는 클라이언트에 따라 다릅니다.

절차

1. 기본 스토리지 클러스터가 다운되었는지 확인합니다.
2. 기본 이미지를 사용하는 모든 클라이언트를 중지합니다. 이 단계는 이미지를 사용하는 클라이언트에 따라 다릅니다. 예를 들어 이미지를 사용하는 OpenStack 인스턴스에서 볼륨을 분리합니다.

3. site-b 스토리지 클러스터의 Ceph Monitor 노드에서 기본 이외의 이미지를 승격합니다. 데모를 site-a 스토리지 클러스터로 전달할 수 없기 때문에 --force 옵션을 사용합니다.

   구문

   rbd mirror image promote --force POOL_NAME/IMAGE_NAME

   예제

   [root@rbd-client ~]# rbd mirror image promote --force data/image1
   [root@rbd-client ~]# rbd mirror image promote --force data/image2

4. site-b 스토리지 클러스터의 Ceph Monitor 노드에서 이미지 상태를 확인합니다. up+stopping_replay 상태가 표시되어야 합니다. 설명은 강제 승격 해야 합니다. 즉, 간헐적인 상태에 있습니다. 상태가 up+stopped 가 될 때까지 기다린 후 사이트를 검증합니다.

   예제

   [root@rbd-client ~]# rbd mirror image status data/image1
   image1:
     global_id:   08027096-d267-47f8-b52e-59de1353a034
     state:       up+stopping_replay
     description: force promoted
     last_update: 2023-04-17 13:25:06
   
   [root@rbd-client ~]# rbd mirror image status data/image1
   image1:
     global_id:   08027096-d267-47f8-b52e-59de1353a034
     state:       up+stopped
     description: force promoted
     last_update: 2023-04-17 13:25:06

절차

1. Cephadm 쉘에 로그인합니다.

   예제

   [root@rbd-client ~]# cephadm shell

2. site-a 스토리지 클러스터에서 다음 명령을 실행합니다.

   예제

   [ceph: root@rbd-client /]# ceph orch apply rbd-mirror --placement=host01

3. 액세스할 수 없는 피어를 제거합니다.

   중요

   이 단계는 가동 및 실행 중인 피어 사이트에서 실행해야 합니다.

   참고

   여러 피어는 한 가지 방법 미러링에만 지원됩니다.

   1. 풀 UUID를 가져옵니다.

      구문

      rbd mirror pool info POOL_NAME

      예제

      [ceph: root@host01 /]# rbd mirror pool info pool_failback

   2. 액세스할 수 없는 피어를 제거합니다.

      구문

      rbd mirror pool peer remove POOL_NAME PEER_UUID

      예제

      [ceph: root@host01 /]# rbd mirror pool peer remove pool_failback f055bb88-6253-4041-923d-08c4ecbe799a

4. 피어 미러 풀과 동일한 이름으로 블록 장치 풀을 만듭니다.

   1. rbd 풀을 만들려면 다음을 실행합니다.

      구문

      ceph osd pool create POOL_NAME PG_NUM
      ceph osd pool application enable POOL_NAME rbd
      rbd pool init -p POOL_NAME

      예제

      [root@rbd-client ~]# ceph osd pool create pool1
      [root@rbd-client ~]# ceph osd pool application enable pool1 rbd
      [root@rbd-client ~]# rbd pool init -p pool1

5. Ceph 클라이언트 노드에서 스토리지 클러스터 피어를 부트스트랩합니다.

   1. Ceph 사용자 계정을 생성하고 스토리지 클러스터 피어를 풀에 등록합니다.

      구문

      rbd mirror pool peer bootstrap create --site-name LOCAL_SITE_NAME POOL_NAME > PATH_TO_BOOTSTRAP_TOKEN

      예제

      [ceph: root@rbd-client-site-a /]# rbd mirror pool peer bootstrap create --site-name site-a data > /root/bootstrap_token_site-a

      참고

      이 예제 bootstrap 명령은 client.rbd-mirror.site-a 및 client.rbd-mirror-peer Ceph 사용자를 생성합니다.

   2. 부트스트랩 토큰 파일을 site-b 스토리지 클러스터에 복사합니다.

   3. site-b 스토리지 클러스터에서 부트스트랩 토큰을 가져옵니다.

      구문

      rbd mirror pool peer bootstrap import --site-name LOCAL_SITE_NAME --direction rx-only POOL_NAME PATH_TO_BOOTSTRAP_TOKEN

      예제

      [ceph: root@rbd-client-site-b /]# rbd mirror pool peer bootstrap import --site-name site-b --direction rx-only data /root/bootstrap_token_site-a

      참고

      단방향 RBD 미러링의 경우 피어 부트스트랩 시 양방향 미러링이 기본값이므로 --direction rx-only 인수를 사용해야 합니다.

6. 사이트-a 스토리지 클러스터의 모니터 노드에서 site-b 스토리지 클러스터가 피어로 성공적으로 추가되었는지 확인합니다.

   예제

   [ceph: root@rbd-client /]# rbd mirror pool info -p data
   Mode: image
   Peers:
     UUID                                 NAME   CLIENT
     d2ae0594-a43b-4c67-a167-a36c646e8643 site-b client.site-b

절차

1. site-a 스토리지 클러스터에서 피어로 site-b 스토리지 클러스터를 제거합니다.

   예제

   [root@rbd-client ~]# rbd mirror pool peer remove data client.remote@remote --cluster local
   [root@rbd-client ~]# rbd --cluster site-a mirror pool peer remove data client.site-b@site-b -n client.site-a

2. site-a 클라이언트에서 rbd-mirror 데몬을 중지하고 비활성화합니다.

   구문

   systemctl stop ceph-rbd-mirror@CLIENT_ID
   systemctl disable ceph-rbd-mirror@CLIENT_ID
   systemctl disable ceph-rbd-mirror.target

   예제

   [root@rbd-client ~]# systemctl stop ceph-rbd-mirror@site-a
   [root@rbd-client ~]# systemctl disable ceph-rbd-mirror@site-a
   [root@rbd-client ~]# systemctl disable ceph-rbd-mirror.target