5.8. 障害からの復旧

手順

1. プライマリーイメージを使用するクライアントをすべて停止します。この手順は、どのクライアントがイメージを使用するかにより異なります。たとえば、イメージを使用する OpenStack インスタンスからボリュームの割り当てを解除します。

2. site-a クラスターのモニターノードで以下のコマンドを実行して、site-a クラスターにあるプライマリーイメージをデモートします。

   構文

   rbd mirror image demote POOL_NAME/IMAGE_NAME

   例

   [root@rbd-client ~]# rbd mirror image demote data/image1
   [root@rbd-client ~]# rbd mirror image demote data/image2

3. site-b クラスターにあるプライマリー以外のイメージをプロモートするには、site-b クラスターのモニターノードで以下のコマンドを実行します。

   構文

   rbd mirror image promote POOL_NAME/IMAGE_NAME

   例

   [root@rbd-client ~]# rbd mirror image promote data/image1
   [root@rbd-client ~]# rbd mirror image promote data/image2

4. しばらくすると、site-b クラスターのモニターノードからイメージのステータスを確認します。イメージのステータスは、up+stopped の状態を表示し、プライマリーとしてリストされているはずです。

   [root@rbd-client ~]# rbd mirror image status data/image1
   image1:
     global_id:   08027096-d267-47f8-b52e-59de1353a034
     state:       up+stopped
     description: local image is primary
     last_update: 2019-04-17 16:04:37
   [root@rbd-client ~]# rbd mirror image status data/image2
   image2:
     global_id:   596f41bc-874b-4cd4-aefe-4929578cc834
     state:       up+stopped
     description: local image is primary
     last_update: 2019-04-17 16:04:37

5. イメージへのアクセスを再開します。この手順は、どのクライアントがイメージを使用するかにより異なります。

手順

1. プライマリーストレージクラスターが停止していることを確認します。
2. プライマリーイメージを使用するクライアントをすべて停止します。この手順は、どのクライアントがイメージを使用するかにより異なります。たとえば、イメージを使用する OpenStack インスタンスからボリュームの割り当てを解除します。

3. site-b ストレージクラスターの Ceph Monitor ノードからプライマリー以外のイメージをプロモートします。site-a ストレージクラスターにデモートが伝播されないので、--force オプションを使用します。

   構文

   rbd mirror image promote --force POOL_NAME/IMAGE_NAME

   例

   [root@rbd-client ~]# rbd mirror image promote --force data/image1
   [root@rbd-client ~]# rbd mirror image promote --force data/image2

4. site-b ストレージクラスターの Ceph Monitor ノードからイメージのステータスを確認します。状態として、up+stopping_replay が、説明に force promoted と表示されるはずです。

   例

   [root@rbd-client ~]# rbd mirror image status data/image1
   image1:
     global_id:   08027096-d267-47f8-b52e-59de1353a034
     state:       up+stopping_replay
     description: force promoted
     last_update: 2019-04-17 13:25:06
   [root@rbd-client ~]# rbd mirror image status data/image2
   image2:
     global_id:   596f41bc-874b-4cd4-aefe-4929578cc834
     state:       up+stopping_replay
     description: force promoted
     last_update: 2019-04-17 13:25:06

手順

1. site-a ストレージクラスターのクライアントノードで、rbd-mirror パッケージをインストールします。

   [root@rbd-client ~]# yum install rbd-mirror

   注記

   パッケージは Red Hat Ceph Storage Tools リポジトリーによって提供されます。

2. site-a ストレージクラスターのクライアントノードで、 CLUSTER オプションを /etc/sysconfig/ceph ファイルに追加して、ストレージクラスター名を指定します。

   CLUSTER=site-b

3. site-b Ceph 設定ファイルおよびキーリングファイルを site-b Ceph Monitor ノードから site-a の Ceph Monitor およびクライアントノードにコピーします。

   構文

   scp /etc/ceph/ceph.conf USER@SITE_A_MON_NODE_NAME:/etc/ceph/site-b.conf
   scp /etc/ceph/site-b.client.site-b.keyring root@SITE_A_MON_NODE_NAME:/etc/ceph/
   scp /etc/ceph/ceph.conf user@SITE_A_CLIENT_NODE_NAME:/etc/ceph/site-b.conf
   scp /etc/ceph/site-b.client.site-b.keyring user@SITE_A_CLIENT_NODE_NAME:/etc/ceph/

   注記

   Ceph 設定ファイルを site-b Ceph Monitor ノードから site-a の Ceph Monitor およびクライアントノードに転送する scp コマンドをし用すると、ファイルの名前が site-a.conf に変更されます。キーリングファイル名は同じままです。

4. site-a キーリングファイルを site-a Ceph Monitor ノードから site-a クライアントノード にコピーします。

   構文

   scp /etc/ceph/site-a.client.site-a.keyring <user>@SITE_A_CLIENT_HOST_NAME:/etc/ceph/

5. site-a クライアントノードで rbd-mirror デーモンを有効にして起動します。

   構文

   systemctl enable ceph-rbd-mirror.target
   systemctl enable ceph-rbd-mirror@CLIENT_ID
   systemctl start ceph-rbd-mirror@CLIENT_ID

   CLIENT_ID は、rbd-mirror デーモンが使用する Ceph Storage クラスターユーザーに変更します。ユーザーには、ストレージクラスターへの適切な cephx アクセスが必要です。

   例

   [root@rbd-client ~]# systemctl enable ceph-rbd-mirror.target
   [root@rbd-client ~]# systemctl enable ceph-rbd-mirror@site-a
   [root@rbd-client ~]# systemctl start ceph-rbd-mirror@site-a

6. site-a クラスターのクライアントノードから、site-b クラスターをピアとして追加します。

   例

   [root@rbd-client ~]# rbd --cluster site-a mirror pool peer add data client.site-b@site-b -n client.site-a

   複数のセカンダリーストレージクラスターを使用している場合には、フェイルオーバー先とフェイルバック元に選択されたセカンダリーストレージクラスターを追加する必要があります。

7. site-a ストレージクラスターのモニターノードから、site-b ストレージクラスターがピアとして正常に追加されたことを確認します。

   構文

   rbd mirror pool info POOL_NAME

   例

   [root@rbd-client ~]# rbd mirror pool info data
   Mode: image
   Site Name: site-a
   
   Peer Sites:
   
   UUID: 950ddadf-f995-47b7-9416-b9bb233f66e3
   Name: site-b
   Mirror UUID: 4696cd9d-1466-4f98-a97a-3748b6b722b3
   Direction: rx-tx
   Client: client.site-b

手順

1. site-a ストレージクラスターから、ピアとしての site-b ストレージクラスターを削除します。

   例

   [root@rbd-client ~]# rbd mirror pool peer remove data client.remote@remote --cluster local
   [root@rbd-client ~]# rbd --cluster site-a mirror pool peer remove data client.site-b@site-b -n client.site-a

2. site-a クライアントで rbd-mirror デーモンを停止して無効にします。

   構文

   systemctl stop ceph-rbd-mirror@CLIENT_ID
   systemctl disable ceph-rbd-mirror@CLIENT_ID
   systemctl disable ceph-rbd-mirror.target

   例

   [root@rbd-client ~]# systemctl stop ceph-rbd-mirror@site-a
   [root@rbd-client ~]# systemctl disable ceph-rbd-mirror@site-a
   [root@rbd-client ~]# systemctl disable ceph-rbd-mirror.target