8.6. 使用 OADP 的托管集群的灾难恢复

流程

1. 运行以下命令，将 NodePool 副本缩减为 0 ：

   $ oc --kubeconfig <management_cluster_kubeconfig_file> \
     scale nodepool -n <hosted_cluster_namespace> \
     <node_pool_name> --replicas 0

2. 运行以下命令暂停 HostedCluster 资源的协调：

   $ oc --kubeconfig <management_cluster_kubeconfig_file> \
     patch hostedcluster -n <hosted_cluster_namespace> <hosted_cluster_name> \
     --type json -p '[{"op": "add", "path": "/spec/pausedUntil", "value": "true"}]'

3. 运行以下命令暂停 NodePool 资源的协调：

   $ oc --kubeconfig <management_cluster_kubeconfig_file> \
     patch nodepool -n <hosted_cluster_namespace> <node_pool_name> \
     --type json -p '[{"op": "add", "path": "/spec/pausedUntil", "value": "true"}]'

4. 创建定义 Backup CR 的 YAML 文件：

   例 8.1. backup-control-plane.yaml 文件示例

   apiVersion: velero.io/v1
   kind: Backup
   metadata:
     name: <backup_resource_name> 1
     namespace: openshift-adp
     labels:
       velero.io/storage-location: default
   spec:
     hooks: {}
     includedNamespaces: 2
     - <hosted_cluster_namespace> 3
     - <hosted_control_plane_namespace> 4
     includedResources:
     - sa
     - role
     - rolebinding
     - pod
     - pvc
     - pv
     - bmh
     - configmap
     - infraenv 5
     - priorityclasses
     - pdb
     - agents
     - hostedcluster
     - nodepool
     - secrets
     - services
     - deployments
     - hostedcontrolplane
     - cluster
     - agentcluster
     - agentmachinetemplate
     - agentmachine
     - machinedeployment
     - machineset
     - machine
     excludedResources: []
     storageLocation: default
     ttl: 2h0m0s
     snapshotMoveData: true 6
     datamover: "velero" 7
     defaultVolumesToFsBackup: true 8

   1

   将 backup_resource_name 替换为 Backup 资源的名称。

   2

   选择特定命名空间来备份对象。您必须包含托管集群命名空间和托管的 control plane 命名空间。

   3

   将 <hosted_cluster_namespace> 替换为托管集群命名空间的名称，如 clusters。

   4

   将 <hosted_control_plane_namespace> 替换为托管的 control plane 命名空间的名称，如 cluster-hosted。

   5

   您必须在单独的命名空间中创建 infraenv 资源。不要在备份过程中删除 infraenv 资源。

   6 7

   启用 CSI 卷快照，并自动将 control plane 工作负载上传到云存储中。

   8

   将持久性卷 (PV) 的 fs-backup 备份方法设置为默认。当您使用 Container Storage Interface (CSI) 卷快照和 fs-backup 方法的组合时，此设置很有用。

   注意

   如果要使用 CSI 卷快照，您必须在 PV 中添加 backup.velero.io/backup-volumes-excludes=<pv_name> 注解。

5. 运行以下命令来应用 Backup CR：

   $ oc apply -f backup-control-plane.yaml

流程

1. 运行以下命令，验证托管的 control plane 命名空间中没有 pod 和持久性卷声明 (PVC)：

   $ oc get pod pvc -n <hosted_control_plane_namespace>

   预期输出

   No resources found

2. 创建定义 Restore CR 的 YAML 文件：

   restore-hosted-cluster.yaml 文件示例

   apiVersion: velero.io/v1
   kind: Restore
   metadata:
     name: <restore_resource_name> 1
     namespace: openshift-adp
   spec:
     backupName: <backup_resource_name> 2
     restorePVs: true 3
     existingResourcePolicy: update 4
     excludedResources:
     - nodes
     - events
     - events.events.k8s.io
     - backups.velero.io
     - restores.velero.io
     - resticrepositories.velero.io

   1

   将 <restore_resource_name> 替换为 Restore 资源的名称。

   2

   将 <backup_resource_name> 替换为 Backup 资源的名称。

   3

   启动持久性卷 (PV) 及其 pod 的恢复。

   4

   确保现有对象被备份的内容覆盖。

   重要

   您必须在单独的命名空间中创建 infraenv 资源。不要在恢复过程中删除 infraenv 资源。要重新置备新节点，infraenv 资源是必须的。

3. 运行以下命令来应用 Restore CR：

   $ oc apply -f restore-hosted-cluster.yaml

4. 运行以下命令，验证 status.phase 的值是否为 Completed ：

   $ oc get hostedcluster <hosted_cluster_name> -n <hosted_cluster_namespace> -o jsonpath='{.status.phase}'

5. 恢复过程完成后，启动您在备份 control plane 工作负载过程中暂停的 HostedCluster 和 NodePool 资源的协调：

   1. 运行以下命令启动 HostedCluster 资源的协调：

      $ oc --kubeconfig <management_cluster_kubeconfig_file> \
        patch hostedcluster -n <hosted_cluster_namespace> <hosted_cluster_name> \
        --type json -p '[{"op": "add", "path": "/spec/pausedUntil", "value": "false"}]'

   2. 运行以下命令，启动 NodePool 资源的协调：

      $ oc --kubeconfig <management_cluster_kubeconfig_file> \
        patch nodepool -n <hosted_cluster_namespace> <node_pool_name> \
        --type json -p '[{"op": "add", "path": "/spec/pausedUntil", "value": "false"}]'

6. 运行以下命令，将 NodePool 资源扩展到所需的副本数：

   $ oc --kubeconfig <management_cluster_kubeconfig_file> \
     scale nodepool -n <hosted_cluster_namespace> <node_pool_name> \
     --replicas <replica_count> 1

   1

   将 <replica_count> 替换为整数值，如 3。

流程

1. 运行以下命令观察备份过程：

   $ watch "oc get backup -n openshift-adp <backup_resource_name> -o jsonpath='{.status}'"

2. 运行以下命令观察恢复过程：

   $ watch "oc get restore -n openshift-adp <backup_resource_name> -o jsonpath='{.status}'"

3. 运行以下命令观察 Velero 日志：

   $ oc logs -n openshift-adp -ldeploy=velero -f

4. 运行以下命令，观察所有 OADP 对象的进度：

   $ watch "echo BackupRepositories:;echo;oc get backuprepositories.velero.io -A;echo; echo BackupStorageLocations: ;echo; oc get backupstoragelocations.velero.io -A;echo;echo DataUploads: ;echo;oc get datauploads.velero.io -A;echo;echo DataDownloads: ;echo;oc get datadownloads.velero.io -n openshift-adp; echo;echo VolumeSnapshotLocations: ;echo;oc get volumesnapshotlocations.velero.io -A;echo;echo Backups:;echo;oc get backup -A; echo;echo Restores:;echo;oc get restore -A"

流程

1. 运行以下命令，创建一个别名，以便从容器中使用 velero CLI：

   $ alias velero='oc -n openshift-adp exec deployment/velero -c velero -it -- ./velero'

2. 运行以下命令，获取 Restore 自定义资源 (CR) 的详情：

   $ velero restore describe <restore_resource_name> --details 1

   1

   将 <restore_resource_name> 替换为 Restore 资源的名称。

3. 运行以下命令，获取 Backup CR 的详情：

   $ velero restore describe <backup_resource_name> --details 1

   1

   将 <backup_resource_name> 替换为 Backup 资源的名称。