7.5. システムデータベースの復元

手順

1. Zync DeploymentConfig を 0 Pod にスケールダウンします。

   oc scale dc zync --replicas=0
   oc scale dc zync-que --replicas=0

2. Zync データベースダンプを zync-database Pod にコピーします。

   oc cp ./zync-database-backup.gz $(oc get pods -l 'deploymentConfig=zync-database' -o json | jq '.items[0].metadata.name' -r):/var/lib/pgsql/

3. バックアップファイルを展開します。

   oc rsh $(oc get pods -l 'deploymentConfig=zync-database' -o json | jq -r '.items[0].metadata.name') bash -c 'gzip -d ${HOME}/zync-database-backup.gz'

4. PostgreSQL DB バックアップファイルを復元します。

   oc rsh $(oc get pods -l 'deploymentConfig=zync-database' -o json | jq -r '.items[0].metadata.name') bash -c 'psql -f ${HOME}/zync-database-backup'

5. 以下のコマンドで ${ZYNC_REPLICAS} をレプリカ数に置き換えて、元のレプリカ数に復元します。

   oc scale dc zync --replicas=${ZYNC_REPLICAS}
   oc scale dc zync-que --replicas=${ZYNC_REPLICAS}

手順

1. ${DEPLOYMENT_NAME} を 3scale デプロイメントの作成時に定義した名前に置き換えて、レプリカ数を保存します。

   ZYNC_SPEC=`oc get APIManager/${DEPLOYMENT_NAME} -o json | jq -r '.spec.zync'`

2. Zync DeploymentConfig を 0 Pod にスケールダウンします。

   oc patch APIManager/${DEPLOYMENT_NAME} --type merge -p '{"spec": {"zync": {"appSpec": {"replicas": 0}, "queSpec": {"replicas": 0}}}}'

3. Zync データベースダンプを zync-database Pod にコピーします。

   oc cp ./zync-database-backup.gz $(oc get pods -l 'deploymentConfig=zync-database' -o json | jq '.items[0].metadata.name' -r):/var/lib/pgsql/

4. バックアップファイルを展開します。

   oc rsh $(oc get pods -l 'deploymentConfig=zync-database' -o json | jq -r '.items[0].metadata.name') bash -c 'gzip -d ${HOME}/zync-database-backup.gz'

5. PostgreSQL DB バックアップファイルを復元します。

   oc rsh $(oc get pods -l 'deploymentConfig=zync-database' -o json | jq -r '.items[0].metadata.name') bash -c 'psql -f ${HOME}/zync-database-backup'

6. 元のレプリカ数に復元します。

   oc patch APIManager ${DEPLOYMENT_NAME} --type merge -p '{"spec": {"zync":'"${ZYNC_SPEC}"'}}'

手順

1. redis-config configmap を編集します。

   oc edit configmap redis-config

2. redis-config configmap の SAVE コマンドをコメント化します。

    #save 900 1
    #save 300 10
    #save 60 10000

3. redis-config configmap の appendonly を no に設定します。

   appendonly no

4. backend-redis を再デプロイして、新しい設定を読み込みます。

   oc rollout latest dc/backend-redis

5. ロールアウトのステータスを表示し、読み込みが完了したことを確認します。

   oc rollout status dc/backend-redis

6. dump.rdb ファイルの名前を変更します。

   oc rsh $(oc get pods -l 'deploymentConfig=backend-redis' -o json | jq '.items[0].metadata.name' -r) bash -c 'mv ${HOME}/data/dump.rdb ${HOME}/data/dump.rdb-old'

7. appendonly.aof ファイルの名前を変更します。

   oc rsh $(oc get pods -l 'deploymentConfig=backend-redis' -o json | jq '.items[0].metadata.name' -r) bash -c 'mv ${HOME}/data/appendonly.aof ${HOME}/data/appendonly.aof-old'

8. バックアップファイルを POD に移動します。

   oc cp ./backend-redis-dump.rdb $(oc get pods -l 'deploymentConfig=backend-redis' -o json | jq '.items[0].metadata.name' -r):/var/lib/redis/data/dump.rdb

9. backend-redis を再デプロイして、バックアップを読み込みます。

   oc rollout latest dc/backend-redis

10. ロールアウトのステータスを表示し、読み込みが完了したことを確認します。

    oc rollout status dc/backend-redis

11. appendonly ファイルを作成します。

    oc rsh $(oc get pods -l 'deploymentConfig=backend-redis' -o json | jq '.items[0].metadata.name' -r) bash -c 'redis-cli BGREWRITEAOF'

12. しばらくしてから、AOF の書き換えが完了していることを確認します。

    oc rsh $(oc get pods -l 'deploymentConfig=backend-redis' -o json | jq '.items[0].metadata.name' -r) bash -c 'redis-cli info' | grep aof_rewrite_in_progress

    • aof_rewrite_in_progress = 1 の間は、実行は進行中です。
    • aof_rewrite_in_progress = 0 となるまで、定期的に確認します。ゼロは実行が完了したことを示します。

13. redis-config configmap を編集します。

    oc edit configmap redis-config

14. redis-config configmap の SAVE コマンドをコメント解除します。

     save 900 1
     save 300 10
     save 60 10000

15. redis-config configmap の appendonly を yes に設定します。

    appendonly yes

16. backend-redis を再デプロイして、デフォルト設定を再読み込みします。

    oc rollout latest dc/backend-redis

17. ロールアウトのステータスを表示し、読み込みが完了したことを確認します。

    oc rollout status dc/backend-redis

手順

1. redis-config configmap を編集します。

   oc edit configmap redis-config

2. redis-config configmap の SAVE コマンドをコメント化します。

    #save 900 1
    #save 300 10
    #save 60 10000

3. redis-config configmap の appendonly を no に設定します。

   appendonly no

4. system-redis を再デプロイして、新しい設定を読み込みます。

   oc rollout latest dc/system-redis

5. ロールアウトのステータスを表示し、読み込みが完了したことを確認します。

   oc rollout status dc/system-redis

6. dump.rdb ファイルの名前を変更します。

   oc rsh $(oc get pods -l 'deploymentConfig=system-redis' -o json | jq '.items[0].metadata.name' -r) bash -c 'mv ${HOME}/data/dump.rdb ${HOME}/data/dump.rdb-old'

7. appendonly.aof ファイルの名前を変更します。

   oc rsh $(oc get pods -l 'deploymentConfig=system-redis' -o json | jq '.items[0].metadata.name' -r) bash -c 'mv ${HOME}/data/appendonly.aof ${HOME}/data/appendonly.aof-old'

8. バックアップ ファイルを POD に移動します。

   oc cp ./system-redis-dump.rdb $(oc get pods -l 'deploymentConfig=system-redis' -o json | jq '.items[0].metadata.name' -r):/var/lib/redis/data/dump.rdb

9. system-redis を再デプロイして、バックアップを読み込みます。

   oc rollout latest dc/system-redis

10. ロールアウトのステータスを表示し、読み込みが完了したことを確認します。

    oc rollout status dc/system-redis

11. appendonly ファイルを作成します。

    oc rsh $(oc get pods -l 'deploymentConfig=system-redis' -o json | jq '.items[0].metadata.name' -r) bash -c 'redis-cli BGREWRITEAOF'

12. しばらくしてから、AOF の書き換えが完了していることを確認します。

    oc rsh $(oc get pods -l 'deploymentConfig=system-redis' -o json | jq '.items[0].metadata.name' -r) bash -c 'redis-cli info' | grep aof_rewrite_in_progress

    • aof_rewrite_in_progress = 1 の間は、実行は進行中です。
    • aof_rewrite_in_progress = 0 となるまで、定期的に確認します。ゼロは実行が完了したことを示します。

13. redis-config configmap を編集します。

    oc edit configmap redis-config

14. redis-config configmap の SAVE コマンドをコメント解除します。

     save 900 1
     save 300 10
     save 60 10000

15. redis-config configmap の appendonly を yes に設定します。

    appendonly yes

16. system-redis を再デプロイして、デフォルト設定を再読み込みします。

    oc rollout latest dc/system-redis

17. ロールアウトのステータスを表示し、読み込みが完了したことを確認します。

    oc rollout status dc/system-redis

1. 最新バージョンの system-sphinx に復元します。

   oc rollout latest dc/system-sphinx

2. ロールアウトのステータスを表示し、読み込みが完了したことを確認します。

   oc rollout status dc/system-sphinx

1. 不足している OpenShift ルートを再作成するように Zync に強制します。

   oc rsh $(oc get pods -l 'deploymentConfig=system-sidekiq' -o json | jq '.items[0].metadata.name' -r) bash -c 'bundle exec rake zync:resync:domains'