アンダークラウドおよびコントロールプレーンノードのバックアップと復元

手順

1. アンダークラウドノードにおいて、source コマンドでアンダークラウドの認証情報を読み込みます。

   [stack@undercloud ~]$ source stackrc
   (undercloud) [stack@undercloud ~]$

   Copy to Clipboard Toggle word wrap

2. アンダークラウドノードで、バックアップノードのインベントリーファイルを作成します。ここで、<ip_address> および <user> を実際の環境の該当する値に置き換えます。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF'> ~/nfs-inventory.yaml
   [BackupNode]
   <backup_node> ansible_host=<ip_address> ansible_user=<user>
   EOF

   Copy to Clipboard Toggle word wrap

3. アンダークラウドノードで、以下の Ansible Playbook を作成します。ここで、<backup_node> をバックアップノードのホスト名に置き換えます。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF' > ~/bar_nfs_setup.yaml
   # Playbook
   # Substitute <backup_node> with the host name of your backup node.
   - become: true
     hosts: <backup_node>
     name: Setup NFS server for ReaR
     roles:
     - role: backup-and-restore
   EOF

   Copy to Clipboard Toggle word wrap

4. 公開 SSH 鍵をアンダークラウドノードからバックアップノードにコピーします。

   (undercloud) [stack@undercloud ~]$ ssh-copy-id -i ~/.ssh/id_rsa.pub <backup_node>

   Copy to Clipboard Toggle word wrap

   <backup_node> をバックアップノードのパスおよび名前に置き換えます。

5. アンダークラウドノードで以下の ansible-playbook コマンドを入力し、バックアップノードを設定します。

   (undercloud) [stack@undercloud ~]$ ansible-playbook \
       -v -i ~/nfs-inventory.yaml \
       --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
       --become \
       --become-user root \
       --tags bar_setup_nfs_server \
       ~/bar_nfs_setup.yaml

   Copy to Clipboard Toggle word wrap

手順

1. アンダークラウドノードにおいて、source コマンドでアンダークラウドの認証情報を読み込み、tripleo-ansible-inventory コマンドを使用して、すべてのオーバークラウドノードのホストおよび変数が含まれる静的なインベントリーファイル生成します。

   [stack@undercloud ~]$ source stackrc
   (undercloud) [stack@undercloud ~]$ tripleo-ansible-inventory \
   --ansible_ssh_user heat-admin \
   --static-yaml-inventory /home/stack/tripleo-inventory.yaml

   Copy to Clipboard Toggle word wrap

   カスタムのスタック名を使用する場合は、--stack <stack_name> オプションを tripleo-ansible-inventory コマンドに追加します。

2. アンダークラウドノードで、以下の Ansible Playbook を作成します。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF' > ~/bar_rear_setup-undercloud.yaml
   # Playbook
   # Installing and configuring ReaR on the undercloud node
   - become: true
     hosts: undercloud
     name: Install ReaR
     roles:
     - role: backup-and-restore
   EOF

   Copy to Clipboard Toggle word wrap

3. 以下のいずれかのオプションを選択します。

   1. NFS を使用する場合は、次の Ansible コマンドを入力して、アンダークラウドノードに ReaR をインストールします。

      (undercloud) [stack@undercloud ~]$ ansible-playbook \
          -v -i ~/tripleo-inventory.yaml \
          --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
          --become \
          --become-user root \
          -e tripleo_backup_and_restore_server=<nfs-ip> \
          --tags bar_setup_rear \
          ~/bar_rear_setup-undercloud.yaml

      Copy to Clipboard Toggle word wrap

   2. SFTP を使用する場合は、次の Ansible コマンドを入力して、アンダークラウドノードに ReaR をインストールします。

      (undercloud) [stack@undercloud ~]$ ansible-playbook \
          -v -i ~/tripleo-inventory.yaml \
          --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
          --become \
          --become-user root \
          -e tripleo_backup_and_restore_output_url=sftp://<user>:<password>@<backup_node_ip>/ \
          -e tripleo_backup_and_restore_backup_url=iso:///backup/ \
          --tags bar_setup_rear \
          ~/bar_rear_setup-undercloud.yaml

      Copy to Clipboard Toggle word wrap

4. システムで UEFI ブートローダーを使用している場合は、アンダークラウドノードで以下の手順を実施します。

   1. 以下のツールをインストールします。

      $ sudo dnf install dosfstools efibootmgr

      Copy to Clipboard Toggle word wrap
   2. USING_UEFI_BOOTLOADER パラメーターの値 0 を値 1 に置き換えて、/etc/rear/local.conf にある ReaR 設定ファイルで UEFI バックアップを有効にします。

手順

1. アンダークラウドに stack ユーザーとしてログインします。

2. MySQL の root パスワードを取得します。

   [stack@undercloud ~]$ PASSWORD=$(sudo /bin/hiera -c /etc/puppet/hiera.yaml mysql::server::root_password)

   Copy to Clipboard Toggle word wrap

3. アンダークラウドノードのデータベースのバックアップを作成します。

   [stack@undercloud ~]$ sudo podman exec mysql bash -c "mysqldump -uroot -p$PASSWORD --opt --all-databases" | sudo tee /root/undercloud-all-databases.sql

   Copy to Clipboard Toggle word wrap

4. source コマンドでアンダークラウドの認証情報を読み込みます。

   [stack@undercloud ~]$ source stackrc

   Copy to Clipboard Toggle word wrap

5. アンダークラウドノードで、以下の Ansible Playbook を作成します。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF' > ~/bar_rear_create_restore_images-undercloud.yaml
   # Playbook
   # Using ReaR on the undercloud node.
   - become: true
     hosts: undercloud
     name: Create the recovery images for the undercloud
     roles:
     - role: backup-and-restore
   EOF

   Copy to Clipboard Toggle word wrap

6. アンダークラウドノードのバックアップを作成するには、以下の ansible-playbook コマンドを入力します。

   (undercloud) [stack@undercloud ~]$ ansible-playbook \
       -v -i ~/tripleo-inventory.yaml \
       --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
       --become \
       --become-user root \
       --tags bar_create_recover_image \
       ~/bar_rear_create_restore_images-undercloud.yaml

   Copy to Clipboard Toggle word wrap

手順

1. アンダークラウドノードにおいて、source コマンドでアンダークラウドの認証情報を読み込みます。

   [stack@undercloud ~]$ source stackrc
   (undercloud) [stack@undercloud ~]$

   Copy to Clipboard Toggle word wrap

2. アンダークラウドノードで、バックアップノードのインベントリーファイルを作成します。ここで、<ip_address> および <user> を実際の環境の該当する値に置き換えます。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF'> ~/nfs-inventory.yaml
   [BackupNode]
   <backup_node> ansible_host=<ip_address> ansible_user=<user>
   EOF

   Copy to Clipboard Toggle word wrap

3. アンダークラウドノードで、以下の Ansible Playbook を作成します。ここで、<backup_node> をバックアップノードのホスト名に置き換えます。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF' > ~/bar_nfs_setup.yaml
   # Playbook
   # Substitute <backup_node> with the host name of your backup node.
   - become: true
     hosts: <backup_node>
     name: Setup NFS server for ReaR
     roles:
     - role: backup-and-restore
   EOF

   Copy to Clipboard Toggle word wrap

4. 公開 SSH 鍵をアンダークラウドノードからバックアップノードにコピーします。

   (undercloud) [stack@undercloud ~]$ ssh-copy-id -i ~/.ssh/id_rsa.pub <backup_node>

   Copy to Clipboard Toggle word wrap

   <backup_node> をバックアップノードのパスおよび名前に置き換えます。

5. アンダークラウドノードで以下の ansible-playbook コマンドを入力し、バックアップノードを設定します。

   (undercloud) [stack@undercloud ~]$ ansible-playbook \
       -v -i ~/nfs-inventory.yaml \
       --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
       --become \
       --become-user root \
       --tags bar_setup_nfs_server \
       ~/bar_nfs_setup.yaml

   Copy to Clipboard Toggle word wrap

手順

1. アンダークラウドノードで、以下の Ansible Playbook を作成します。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF' > ~/bar_rear_setup-controller.yaml
   # Playbook
   # Install and configuring ReaR on the control plane nodes
   - become: true
     hosts: Controller
     name: Install ReaR
     roles:
     - role: backup-and-restore
   EOF

   Copy to Clipboard Toggle word wrap
   注記

   設定可能なロールを持つコントロールプレーンノードをデプロイした場合は、ホストタイプの Controller をコントロールプレーン内のノードのタイプに置き換えます。たとえば、データベース、メッセージング、およびネットワーキングを別々のノードにデプロイした場合は、ControllerOpenstack,Database,Messaging,Networker と入力します。

2. 以下のいずれかのオプションを選択します。

   1. NFS を使用し、NFS サーバーの IP アドレスがデフォルト値の 192.168.24.1 の場合は、アンダークラウドノードで以下の Ansible コマンドを入力し、コントロールプレーンノードに ReaR をインストールします。

      (undercloud) [stack@undercloud ~]$ ansible-playbook \
          -v -i ~/tripleo-inventory.yaml \
          --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
          --become \
          --become-user root \
          --tags bar_setup_rear \
          ~/bar_rear_setup-controller.yaml

      Copy to Clipboard Toggle word wrap

   2. SFTP を使用し、NFS サーバーの IP アドレスがデフォルト値の 192.168.24.1 以外の場合は、以下の Ansible コマンドを入力し、コントロールプレーンノードに ReaR をインストールします。

      (undercloud) [stack@undercloud ~]$ ansible-playbook \
          -v -i ~/tripleo-inventory.yaml \
          --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
          --become \
          --become-user root \
          -e tripleo_backup_and_restore_server=<nfs_ip> \
          --tags bar_setup_rear \
          ~/bar_rear_setup-controller.yaml

      Copy to Clipboard Toggle word wrap

      <nfs_ip> を NFS サーバーの IP アドレスに置き換えます。

   3. SFTP を使用する場合は、次の Ansible コマンドを入力してコントロールプレーンノードに ReaR をインストールします。

      (undercloud) [stack@undercloud ~]$ ansible-playbook \
          -v -i ~/tripleo-inventory.yaml \
          --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
          --become \
          --become-user root \
          -e tripleo_backup_and_restore_output_url=sftp://<user>:<password>@<backup_node_ip>/ \
          -e tripleo_backup_and_restore_backup_url=iso:///backup/ \
          --tags bar_setup_rear \
          ~/bar_rear_setup-undercloud.yaml

      Copy to Clipboard Toggle word wrap

3. システムで UEFI ブートローダーを使用している場合は、コントロールプレーンノードで以下の手順を実行します。

   1. 以下のツールをインストールします。

      $ sudo dnf install dosfstools efibootmgr

      Copy to Clipboard Toggle word wrap
   2. USING_UEFI_BOOTLOADER パラメーターの値 0 を値 1 に置き換えて、/etc/rear/local.conf にある ReaR 設定ファイルで UEFI バックアップを有効にします。

手順

1. 各コントロールプレーンノードで、各ノードの config-drive パーティションを root ユーザーとしてバックアップします。

   [root@controller-x ~]$ dd if=<config_drive_partition> of=/mnt/config-drive

   Copy to Clipboard Toggle word wrap

2. アンダークラウドノードで、以下の Ansible Playbook を作成します。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF' > ~/bar_rear_create_restore_images-controller.yaml
   # Playbook
   # Using ReaR on the control plane nodes.
   - become: true
     hosts: ceph_mon
     name: Backup ceph authentication
     tasks:
       - name: Backup ceph authentication role
         include_role:
           name: backup-and-restore
           tasks_from: ceph_authentication
         tags:
         -  bar_create_recover_image
   - become: true
     hosts: Controller
     name: Create the recovery images for the control plane
     roles:
     - role: backup-and-restore
   EOF

   Copy to Clipboard Toggle word wrap

3. アンダークラウドノードで以下の ansible-playbook コマンドを入力し、コントロールプレーンノードのバックアップを作成します。

   (undercloud) [stack@undercloud ~]$ ansible-playbook \
       -v -i ~/tripleo-inventory.yaml \
       --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
       --become \
       --become-user root \
       --tags bar_create_recover_image \
       ~/bar_rear_create_restore_images-controller.yaml

   Copy to Clipboard Toggle word wrap

手順

1. アンダークラウドノードで、以下のコマンドを入力してバックアップ用のスクリプトを作成します。

   [stack@undercloud ~]$ cat <<'EOF' > /home/stack/execute-rear-cron.sh
   
   #!/bin/bash
   
   OWNER="stack"
   TODAY=`date +%Y%m%d`
   FILE="/var/log/rear-cron.${TODAY}"
   sudo touch ${FILE}
   sudo chown ${OWNER}:${OWNER} ${FILE}
   
   CURRENTTIME=`date`
   echo "[$CURRENTTIME] rear start" >> ${FILE}
   source /home/stack/stackrc && /usr/bin/openstack overcloud backup 2>&1 >> ${FILE}
   CURRENTTIME=`date`
   echo "[$CURRENTTIME] rear end" >> ${FILE}
   EOF

   Copy to Clipboard Toggle word wrap

2. /home/stack/execute-rear-cron.sh スクリプトに実行可能な権限を設定します。

   [stack@undercloud ~]$ chmod 755 /home/stack/execute-rear-cron.sh

   Copy to Clipboard Toggle word wrap

3. crontab -e コマンドで crontab ファイルを編集し、任意のエディターで以下の cron ジョブを追加します。ファイルに加えた変更を保存するようにしてください。

   [stack@undercloud ~]# $ crontab -e
   #adding the following line
   0 0 * * * /home/stack/execute-rear-cron.sh

   Copy to Clipboard Toggle word wrap

   /home/stack/execute-rear-cron.sh スクリプトは、stack ユーザーにより午前 0 時に実行されるようにスケジュールされます。

4. cron ジョブがスケジュールされていることを確認するには、以下のコマンドを入力します。

   [stack@undercloud ~]$ crontab -l

   Copy to Clipboard Toggle word wrap

   コマンド出力には、スケジュールされている cron ジョブが表示されます。

   0 0 * * * /home/stack/execute-rear-cron.sh

   Copy to Clipboard Toggle word wrap

手順

1. アンダークラウドノードにおいて、source コマンドでアンダークラウドの認証情報を読み込みます。

   [stack@undercloud ~]$ source stackrc
   (undercloud) [stack@undercloud ~]$

   Copy to Clipboard Toggle word wrap

2. アンダークラウドノードで、バックアップノードのインベントリーファイルを作成します。ここで、<ip_address> および <user> を実際の環境の該当する値に置き換えます。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF'> ~/nfs-inventory.yaml
   [BackupNode]
   <backup_node> ansible_host=<ip_address> ansible_user=<user>
   EOF

   Copy to Clipboard Toggle word wrap

3. アンダークラウドノードで、以下の Ansible Playbook を作成します。ここで、<backup_node> をバックアップノードのホスト名に置き換えます。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF' > ~/bar_nfs_setup.yaml
   # Playbook
   # Substitute <backup_node> with the host name of your backup node.
   - become: true
     hosts: <backup_node>
     name: Setup NFS server for ReaR
     roles:
     - role: backup-and-restore
   EOF

   Copy to Clipboard Toggle word wrap

4. 公開 SSH 鍵をアンダークラウドノードからバックアップノードにコピーします。

   (undercloud) [stack@undercloud ~]$ ssh-copy-id -i ~/.ssh/id_rsa.pub <backup_node>

   Copy to Clipboard Toggle word wrap

   <backup_node> をバックアップノードのパスおよび名前に置き換えます。

5. アンダークラウドノードで以下の ansible-playbook コマンドを入力し、バックアップノードを設定します。

   (undercloud) [stack@undercloud ~]$ ansible-playbook \
       -v -i ~/nfs-inventory.yaml \
       --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
       --become \
       --become-user root \
       --tags bar_setup_nfs_server \
       ~/bar_nfs_setup.yaml

   Copy to Clipboard Toggle word wrap

手順

1. アンダークラウドノードで、以下の Ansible Playbook を作成します。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF' > ~/bar_rear_setup-controller.yaml
   # Playbook
   # Install and configuring ReaR on the control plane nodes
   - become: true
     hosts: Controller
     name: Install ReaR
     roles:
     - role: backup-and-restore
   EOF

   Copy to Clipboard Toggle word wrap
   注記

   設定可能なロールを持つコントロールプレーンノードをデプロイした場合は、ホストタイプの Controller をコントロールプレーン内のノードのタイプに置き換えます。たとえば、データベース、メッセージング、およびネットワーキングを別々のノードにデプロイした場合は、ControllerOpenstack,Database,Messaging,Networker と入力します。

2. 以下のいずれかのオプションを選択します。

   1. NFS を使用し、NFS サーバーの IP アドレスがデフォルト値の 192.168.24.1 の場合は、アンダークラウドノードで以下の Ansible コマンドを入力し、コントロールプレーンノードに ReaR をインストールします。

      (undercloud) [stack@undercloud ~]$ ansible-playbook \
          -v -i ~/tripleo-inventory.yaml \
          --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
          --become \
          --become-user root \
          --tags bar_setup_rear \
          ~/bar_rear_setup-controller.yaml

      Copy to Clipboard Toggle word wrap

   2. SFTP を使用し、NFS サーバーの IP アドレスがデフォルト値の 192.168.24.1 以外の場合は、以下の Ansible コマンドを入力し、コントロールプレーンノードに ReaR をインストールします。

      (undercloud) [stack@undercloud ~]$ ansible-playbook \
          -v -i ~/tripleo-inventory.yaml \
          --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
          --become \
          --become-user root \
          -e tripleo_backup_and_restore_server=<nfs_ip> \
          --tags bar_setup_rear \
          ~/bar_rear_setup-controller.yaml

      Copy to Clipboard Toggle word wrap

      <nfs_ip> を NFS サーバーの IP アドレスに置き換えます。

   3. SFTP を使用する場合は、次の Ansible コマンドを入力してコントロールプレーンノードに ReaR をインストールします。

      (undercloud) [stack@undercloud ~]$ ansible-playbook \
          -v -i ~/tripleo-inventory.yaml \
          --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
          --become \
          --become-user root \
          -e tripleo_backup_and_restore_output_url=sftp://<user>:<password>@<backup_node_ip>/ \
          -e tripleo_backup_and_restore_backup_url=iso:///backup/ \
          --tags bar_setup_rear \
          ~/bar_rear_setup-undercloud.yaml

      Copy to Clipboard Toggle word wrap

3. システムで UEFI ブートローダーを使用している場合は、コントロールプレーンノードで以下の手順を実行します。

   1. 以下のツールをインストールします。

      $ sudo dnf install dosfstools efibootmgr

      Copy to Clipboard Toggle word wrap
   2. USING_UEFI_BOOTLOADER パラメーターの値 0 を値 1 に置き換えて、/etc/rear/local.conf にある ReaR 設定ファイルで UEFI バックアップを有効にします。

手順

1. 各コントローラーノードで、各ノードの config-drive パーティションをバックアップします。

   [heat-admin@controller-x ~]$ mkdir /mnt/config-drive
   [heat-admin@controller-x ~]$ dd if=<config_drive_partition> of=/mnt/config-drive

   Copy to Clipboard Toggle word wrap
   注記

   この手順は、コントローラーノードでのみ実行する必要があります。

2. アンダークラウドノードで、以下の Ansible Playbook を作成します。

   (undercloud) [stack@undercloud ~]$ cat <<'EOF' > ~/bar_rear_create_restore_images-controller.yaml
   # Playbook
   # Using ReaR on the Contorl-Plane - Composable Roles
   
   - become: true
     hosts: ControllerOpenstack,Database,Messaging,Networker
     name: Stop service management
     tasks:
       - include_role:
           name: backup-and-restore
           tasks_from: ../backup/tasks/service_manager_pause
         when:
          - tripleo_backup_and_restore_service_manager
   
   - become: true
     hosts: Database
     name: Database Backup
     tasks:
       - include_role:
           name: backup-and-restore
           tasks_from: ../backup/tasks/db_backup
   
   - become: true
     hosts: pacemaker
     name: Backup pacemaker configuration
     tasks:
       - include_role:
           name: backup-and-restore
           tasks_from: pacemaker_backup
   
   - become: true
     hosts: ControllerOpenstack,Database,Messaging,Networker
     name: Create recovery images with ReaR
     tasks:
       - include_role:
           name: backup-and-restore
           tasks_from: ../backup/tasks/main
   
   - become: true
     hosts: pacemaker
     name: Enabled pacemaker
     tasks:
       - name: Enable pacemaker
         command: pcs cluster start --all
         when: enabled_galera
         run_once: true
         tags:
          - bar_create_recover_image
   
   - become: true
     hosts: Database
     name: Restart galera
     tasks:
       - name: unPause database container
         command: "{{ tripleo_container_cli }} unpause {{ tripleo_backup_and_restore_mysql_container }}"
         when:
          - tripleo_container_cli is defined
           - not enabled_galera
           - tripleo_backup_and_restore_mysql_container is defined
         tags:
          - bar_create_recover_image
   
   - become: true
     hosts: ControllerOpenstack,Database,Messaging,Networker
     name: Unpause everything
     tasks:
       - name: Gather Container Service Name
         shell: |
          set -o pipefail
           /usr/bin/{{ tripleo_container_cli }} ps -a --filter='status=paused' --format '{{ '{{' }}.Names {{ '}}' }} '
         register: container_services
         changed_when: container_services.stdout is defined
         tags:
          - bar_create_recover_image
   
       - name: Unpause containers for database backup.
         command: "{{ tripleo_container_cli }} unpause {{ item }}"
         with_items: "{{ container_services.stdout_lines }}"
         when: tripleo_container_cli is defined
         tags:
          - bar_create_recover_image

   Copy to Clipboard Toggle word wrap

3. アンダークラウドノードで以下の ansible-playbook コマンドを入力し、コントロールプレーンノードのバックアップを作成します。

   重要

   スタックは操作しないでください。Pacemaker クラスターおよびコンテナーを停止すると、コンピュートノードへのコントロールプレーンサービスが一時的に中断します。また、ネットワーク接続、Ceph、および NFS または SFTP データプレーンサービスにも中断が発生します。この手順の最終ステップに従い、Pacemaker クラスターおよびコンテナーがサービスに戻るまで、インスタンスの作成、インスタンスの移行、要求の認証、クラスターの健全性の監視はできません。

   (undercloud) [stack@undercloud ~]$ ansible-playbook \
       -v -i ~/tripleo-inventory.yaml \
       --extra="ansible_ssh_common_args='-o StrictHostKeyChecking=no'" \
       --become \
       --become-user root \
       --tags bar_create_recover_image \
       ~/bar_rear_create_restore_images-controller.yaml

   Copy to Clipboard Toggle word wrap

手順

1. アンダークラウドノードで、以下のコマンドを入力してバックアップ用のスクリプトを作成します。

   [stack@undercloud ~]$ cat <<'EOF' > /home/stack/execute-rear-cron.sh
   
   #!/bin/bash
   
   OWNER="stack"
   TODAY=`date +%Y%m%d`
   FILE="/var/log/rear-cron.${TODAY}"
   sudo touch ${FILE}
   sudo chown ${OWNER}:${OWNER} ${FILE}
   
   CURRENTTIME=`date`
   echo "[$CURRENTTIME] rear start" >> ${FILE}
   source /home/stack/stackrc && /usr/bin/openstack overcloud backup 2>&1 >> ${FILE}
   CURRENTTIME=`date`
   echo "[$CURRENTTIME] rear end" >> ${FILE}
   EOF

   Copy to Clipboard Toggle word wrap

2. /home/stack/execute-rear-cron.sh スクリプトに実行可能な権限を設定します。

   [stack@undercloud ~]$ chmod 755 /home/stack/execute-rear-cron.sh

   Copy to Clipboard Toggle word wrap

3. crontab -e コマンドで crontab ファイルを編集し、任意のエディターで以下の cron ジョブを追加します。ファイルに加えた変更を保存するようにしてください。

   [stack@undercloud ~]# $ crontab -e
   #adding the following line
   0 0 * * * /home/stack/execute-rear-cron.sh

   Copy to Clipboard Toggle word wrap

   /home/stack/execute-rear-cron.sh スクリプトは、stack ユーザーにより午前 0 時に実行されるようにスケジュールされます。

4. cron ジョブがスケジュールされていることを確認するには、以下のコマンドを入力します。

   [stack@undercloud ~]$ crontab -l

   Copy to Clipboard Toggle word wrap

   コマンド出力には、スケジュールされている cron ジョブが表示されます。

   0 0 * * * /home/stack/execute-rear-cron.sh

   Copy to Clipboard Toggle word wrap

手順

1. 復元する各ノードで、スクリプト /usr/share/rear/setup/default/011_backup_ceph.sh を作成し、次のコンテンツを追加します。

   mount -t <file_type> <device_disk> /mnt/local
   cd /mnt/local
   [ -d "var/lib/ceph" ] && tar cvfz /tmp/ceph.tar.gz var/lib/ceph --xattrs --xattrs-include='.' --acls
   cd /
   umount <device_disk>

   Copy to Clipboard Toggle word wrap

   <file_type> および <device_disk> は、バックアップファイルの種類と場所に置き換えてください。通常、ファイルタイプは xfs で、場所は /dev/vda2 です。

2. 同じノードで、スクリプト /usr/share/rear/wrapup/default/501_restore_ceph.sh を作成し、以下の出力を追加します。

   if [ -f "/tmp/ceph.tar.gz" ]; then
     rm -rf /mnt/local/var/lib/ceph/*
     tar xvC /mnt/local -f /tmp/ceph.tar.gz var/lib/ceph --xattrs --xattrs-include='.'
   fi

   Copy to Clipboard Toggle word wrap

手順

1. アンダークラウドノードの電源をオフにします。次のステップに進む前に、アンダークラウドノードの電源が完全にオフになっていることを確認します。
2. バックアップの ISO イメージでアンダークラウドノードをブートします。

3. Relax-and-Recover ブートメニューが表示されたら、Recover <undercloud_node> を選択します。<undercloud_node> をアンダークラウドノードの名前に置き換えます。

   注記

   システムで UEFI を使用している場合は、Relax-and-Recover (no Secure Boot) オプションを選択します。

4. root ユーザーとしてログインし、ノードを復元します。

   以下のメッセージが表示されます。

   Welcome to Relax-and-Recover. Run "rear recover" to restore your system!
   RESCUE <undercloud_node>:~ # rear recover

   Copy to Clipboard Toggle word wrap

   アンダークラウドノードの復元プロセスが完了すると、コンソールに以下のメッセージが表示されます。

   Finished recovering your system
   Exiting rear recover
   Running exit tasks

   Copy to Clipboard Toggle word wrap

5. ノードの電源を切ります。

   RESCUE <undercloud_node>:~ #  poweroff

   Copy to Clipboard Toggle word wrap

   ノードをブートすると、以前の状態で再開されます。

手順

1. 各コントロールプレーンノードの電源をオフにします。次のステップに進む前に、コントロールプレーンノードの電源が完全にオフになっていることを確認します。
2. 対応するバックアップの ISO イメージで各コントロールプレーンノードをブートします。

3. Relax-and-Recover ブートメニューが表示されたら、各コントロールプレーンノードで Recover <control_plane_node> を選択します。<control_plane_node> を対応するコントロールプレーンノードの名前に置き換えます。

   注記

   システムで UEFI を使用している場合は、Relax-and-Recover (no Secure Boot) オプションを選択します。

4. それぞれのコントロールプレーンノードで root ユーザーとしてログインし、ノードを復元します。

   以下のメッセージが表示されます。

   Welcome to Relax-and-Recover. Run "rear recover" to restore your system!
   RESCUE <control_plane_node>:~ # rear recover

   Copy to Clipboard Toggle word wrap

   コントロールプレーンノードの復元プロセスが完了すると、コンソールに以下のメッセージが表示されます。

   Finished recovering your system
   Exiting rear recover
   Running exit tasks

   Copy to Clipboard Toggle word wrap

5. コマンドラインコンソールが利用可能な場合は、各コントロールプレーンノードの config-drive パーティションを復元します。

   # once completed, restore the config-drive partition (which is ISO9660)
   RESCUE <control_plane_node>:~ $ dd if=/mnt/local/mnt/config-drive of=<config_drive_partition>

   Copy to Clipboard Toggle word wrap
   注記

   コンポーザブルロールを持つコントロールプレーンをデプロイした場合は、コントローラーノードでのみこの手順を実行してください。

6. ノードの電源を切ります。

   RESCUE <control_plane_node>:~ #  poweroff

   Copy to Clipboard Toggle word wrap
7. ブートシーケンスを通常のブートデバイスに設定します。ノードをブートすると、以前の状態で再開されます。

8. サービスが正常に実行されていることを確認するには、pacemaker のステータスを確認します。root ユーザーとしてコントローラーノードにログインし、以下のコマンドを入力します。

   # pcs status

   Copy to Clipboard Toggle word wrap
9. オーバークラウドのステータスを確認するには、OpenStack Integration Test Suite (tempest) を使用します。詳細は、Validating your OpenStack cloud with the Integration Test Suite (tempest) を参照してください。

手順

1. Controller-0 で、Galera クラスターの仮想 IP を取得します。

   $ sudo hiera -c /etc/puppet/hiera.yaml mysql_vip

   Copy to Clipboard Toggle word wrap

2. すべてのコントローラーノードで、仮想 IP を通じたデータベース接続を無効にします。

   $ sudo iptables -I INPUT  -p tcp --destination-port 3306 -d $MYSQL_VIP  -j DROP

   Copy to Clipboard Toggle word wrap

3. Controller-0 で MySQL の root パスワードを取得します。

   $ sudo hiera -c /etc/puppet/hiera.yaml mysql::server::root_password

   Copy to Clipboard Toggle word wrap

4. Controller-0 で、Galera リソースを unmanaged モードに設定します。

   $ sudo pcs resource unmanage galera-bundle

   Copy to Clipboard Toggle word wrap

5. すべてのコントローラーノードで、MySQL コンテナーを停止します。

   $ sudo podman container stop $(sudo podman container ls --all --format "{{.Names}}" --filter=name=galera-bundle)

   Copy to Clipboard Toggle word wrap

6. すべてのコントローラーノードで、現在のディレクトリーを移動します。

   $ sudo mv /var/lib/mysql /var/lib/mysql-save

   Copy to Clipboard Toggle word wrap

7. すべてのコントローラーノードで、新規ディレクトリー /var/lib/mysq を作成します。

   $ sudo mkdir /var/lib/mysql
   $ sudo chown 42434:42434 /var/lib/mysql
   $ sudo chcon -t container_file_t /var/lib/mysql
   $ sudo chmod 0755 /var/lib/mysql
   $ sudo chcon -r object_r /var/lib/mysql
   $ sudo chcon -u system_u /var/lib/mysql

   Copy to Clipboard Toggle word wrap

8. すべてのコントローラーノードで、MySQL コンテナーを起動します。

   $ sudo podman container start $(sudo podman container ls --all --format "{{ .Names }}" --filter=name=galera-bundle)

   Copy to Clipboard Toggle word wrap

9. すべてのコントローラーノードで、MySQL データベースを作成します。

   $ sudo podman exec -i $(sudo podman container ls --all --format "{{ .Names }}" \
         --filter=name=galera-bundle) bash -c "mysql_install_db --datadir=/var/lib/mysql --user=mysql --log_error=/var/log/mysql/mysql_init.log"

   Copy to Clipboard Toggle word wrap

10. すべてのコントローラーノードで、データベースを起動します。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}" \
          --filter=name=galera-bundle) bash -c "mysqld_safe --skip-networking --wsrep-on=OFF --log-error=/var/log/mysql/mysql_safe.log" &

    Copy to Clipboard Toggle word wrap

11. すべてのコントローラーノードで、.my.cnf Galera 設定ファイルを移動します。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}" \
          --filter=name=galera-bundle) bash -c "mv /root/.my.cnf /root/.my.cnf.bck"

    Copy to Clipboard Toggle word wrap

12. すべてのコントローラーノードで、Galera root パスワードをリセットします。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}"  \
          --filter=name=galera-bundle) bash -c "mysql -uroot -e'use mysql;update user set password=PASSWORD(\"$ROOTPASSWORD\")where User=\"root\";flush privileges;'"

    Copy to Clipboard Toggle word wrap

13. すべてのコントローラーノード上の Galera コンテナー内で、.my.cnf Galera 設定ファイルを復元します。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}"   \
          --filter=name=galera-bundle) bash -c "mv /root/.my.cnf.bck /root/.my.cnf"

    Copy to Clipboard Toggle word wrap

14. Controller-0 で、バックアップデータベースファイルを /var/lib/MySQL にコピーします。

    $ sudo cp $BACKUP_FILE /var/lib/mysql
    $ sudo cp $BACKUP_GRANT_FILE /var/lib/mysql

    Copy to Clipboard Toggle word wrap
    注記

    これらのファイルへのパスは /home/heat-admin/ です。

15. Controller-0 で、MySQL データベースを復元します。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}"    \
    --filter=name=galera-bundle) bash -c "mysql -u root -p$ROOT_PASSWORD < \"/var/lib/mysql/$BACKUP_FILE\"  "
    
    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}"    \
    --filter=name=galera-bundle) bash -c "mysql -u root -p$ROOT_PASSWORD < \"/var/lib/mysql/$BACKUP_GRANT_FILE\"  "

    Copy to Clipboard Toggle word wrap

16. すべてのコントローラーノードで、データベースをシャットダウンします。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}"    \
          --filter=name=galera-bundle) bash -c "mysqladmin shutdown"

    Copy to Clipboard Toggle word wrap

17. Controller-0 で、ブートストラップノードを起動します。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}"  --filter=name=galera-bundle) \
            /usr/bin/mysqld_safe --pid-file=/var/run/mysql/mysqld.pid --socket=/var/lib/mysql/mysql.sock --datadir=/var/lib/mysql \
            --log-error=/var/log/mysql/mysql_cluster.log  --user=mysql --open-files-limit=16384 \
            --wsrep-cluster-address=gcomm:// &

    Copy to Clipboard Toggle word wrap

18. 検証: Controller-0 で、クラスターのステータスを確認します。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}" \
             --filter=name=galera-bundle) bash -c "clustercheck"

    Copy to Clipboard Toggle word wrap

    Galera cluster node is synced のメッセージが表示されるのを確認してください。表示されない場合は、ノードを再作成する必要があります。

19. Controller-0 で、設定からクラスターアドレスを取得します。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}" \
    --filter=name=galera-bundle) bash -c "grep wsrep_cluster_address /etc/my.cnf.d/galera.cnf" | awk '{print $3}'

    Copy to Clipboard Toggle word wrap

20. 残りの各コントローラーノードでデータベースを起動し、クラスターを検証します。

    1. データベースを起動します。

       $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}" \
             --filter=name=galera-bundle) /usr/bin/mysqld_safe --pid-file=/var/run/mysql/mysqld.pid --socket=/var/lib/mysql/mysql.sock \
             --datadir=/var/lib/mysql --log-error=/var/log/mysql/mysql_cluster.log  --user=mysql --open-files-limit=16384 \
             --wsrep-cluster-address=$CLUSTER_ADDRESS &

       Copy to Clipboard Toggle word wrap

    2. MYSQL クラスターのステータスを確認します。

       $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}" \
                --filter=name=galera-bundle) bash -c "clustercheck"

       Copy to Clipboard Toggle word wrap

       Galera cluster node is synced のメッセージが表示されるのを確認してください。表示されない場合は、ノードを再作成する必要があります。

21. すべてのコントローラーノードで MySQL コンテナーを停止します。

    $ sudo podman exec $(sudo podman container ls --all --format "{{ .Names }}" --filter=name=galera-bundle) \
            /usr/bin/mysqladmin -u root shutdown

    Copy to Clipboard Toggle word wrap

22. すべてのコントローラーノードで以下のファイアウォールルールを削除して、仮想 IP アドレス経由のデータベース接続を許可します。

    $ sudo iptables -D  INPUT  -p tcp --destination-port 3306 -d $MYSQL_VIP  -j DROP

    Copy to Clipboard Toggle word wrap

23. すべてのコントローラーノードで MySQL コンテナーを再起動します。

    $ sudo podman container restart $(sudo podman container ls --all --format  "{{ .Names }}" --filter=name=galera-bundle)

    Copy to Clipboard Toggle word wrap

24. すべてのコントローラーノードで clustercheck コンテナーを再起動します。

    $ sudo podman container restart $(sudo podman container ls --all --format  "{{ .Names }}" --filter=name=clustercheck)

    Copy to Clipboard Toggle word wrap

25. Controller-0 で、Galera リソースを managed モードに設定します。

    $ sudo pcs resource manage galera-bundle

    Copy to Clipboard Toggle word wrap

検証

1. サービスが正常に実行されていることを確認するには、pacemaker のステータスを確認します。

   $ sudo pcs status

   Copy to Clipboard Toggle word wrap
2. オーバークラウドのステータスを確認するには、OpenStack Integration Test Suite (tempest) を使用します。詳細は、Validating your OpenStack cloud with the Integration Test Suite (tempest) を参照してください。

3. 特定のノードで問題が疑われる場合は、clustercheck でクラスターの状態を確認します。

   $ sudo podman exec clustercheck /usr/bin/clustercheck

   Copy to Clipboard Toggle word wrap

手順

1. director アンダークラウドノードに root ユーザーとしてログインします。

2. すべての tripleo サービスを停止します。

   [root@director ~]# systemctl  stop  tripleo_*

   Copy to Clipboard Toggle word wrap

3. 次のコマンドを入力して、サーバーでコンテナーが実行していないことを確認します。

   [root@director ~]# podman ps

   Copy to Clipboard Toggle word wrap

   実行中のコンテナーがある場合は、次のコマンドを入力してコンテナーを停止します。

   [root@director ~]# podman stop <container_name>

   Copy to Clipboard Toggle word wrap

4. 現在の /var/lib/mysql ディレクトリーのバックアップを作成してから、そのディレクトリーを削除します。

   [root@director ~]# cp -a /var/lib/mysql /var/lib/mysql_bck
   [root@director ~]# rm -rf /var/lib/mysql

   Copy to Clipboard Toggle word wrap

5. データベースディレクトリーを再作成し、新しいディレクトリーに SELinux の属性を設定します。

   [root@director ~]# mkdir /var/lib/mysql
   [root@director ~]# chown 42434:42434 /var/lib/mysql
   [root@director ~]# chmod 0755 /var/lib/mysql
   [root@director ~]# chcon -t container_file_t /var/lib/mysql
   [root@director ~]# chcon -r object_r /var/lib/mysql
   [root@director ~]# chcon -u system_u /var/lib/mysql

   Copy to Clipboard Toggle word wrap

6. mariadb イメージのローカルタグを作成します。<image_id> および <undercloud.ctlplane.example.com> を、使用している環境の値に置き換えます。

   [root@director ~]# podman images | grep mariadb
   <undercloud.ctlplane.example.com>:8787/rh-osbs/rhosp16-openstack-mariadb                 	16.2_20210322.1   <image_id>   3 weeks ago   718 MB

   Copy to Clipboard Toggle word wrap

   [root@director ~]# podman tag <image_id> mariadb

   Copy to Clipboard Toggle word wrap

   [root@director ~]# podman images | grep maria
   localhost/mariadb                                                                         	latest        	<image_id>   3 weeks ago   718 MB
   <undercloud.ctlplane.example.com>:8787/rh-osbs/rhosp16-openstack-mariadb                 	16.2_20210322.1   <image_id>   3 weeks ago   718 MB

   Copy to Clipboard Toggle word wrap

7. /var/lib/mysql ディレクトリーをコンテナーで初期化します。

   [root@director ~]# podman run --net=host -v /var/lib/mysql:/var/lib/mysql localhost/mariadb mysql_install_db --datadir=/var/lib/mysql --user=mysql

   Copy to Clipboard Toggle word wrap

8. データベースにインポートするデータベースのバックアップファイルをコピーします。

   [root@director ~]# cp /root/undercloud-all-databases.sql /var/lib/mysql

   Copy to Clipboard Toggle word wrap

9. データベースサービスを開始して、データをインポートします。

   [root@director ~]# podman run --net=host -dt -v /var/lib/mysql:/var/lib/mysql  localhost/mariadb  /usr/libexec/mysqld

   Copy to Clipboard Toggle word wrap

10. データを読み込み、max_allowed_packet パラメーターを設定します。

    1. コンテナーにログインし、設定を行います。

       [root@director ~]# podman exec -it <container_id> /bin/bash
           ()[mysql@5a4e429c6f40 /]$ mysql -u root -e "set global max_allowed_packet = 1073741824;"
           ()[mysql@5a4e429c6f40 /]$ mysql -u root < /var/lib/mysql/undercloud-all-databases.sql
           ()[mysql@5a4e429c6f40 /]$ mysql -u root -e 'flush privileges'
           ()[mysql@5a4e429c6f40 /]$ exit
           exit

       Copy to Clipboard Toggle word wrap

    2. コンテナーを停止します。

       [root@director ~]# podman stop <container_id>

       Copy to Clipboard Toggle word wrap

    3. コンテナーが動いていないことを確認します。

       [root@director ~]# podman ps
       CONTAINER ID  IMAGE  COMMAND  CREATED  STATUS  PORTS  NAMES
       [root@director ~]#

       Copy to Clipboard Toggle word wrap

11. すべての tripleo サービスを再起動します。

    [root@director ~]# systemctl start multi-user.target

    Copy to Clipboard Toggle word wrap