4.4. 配置一次性镜像

配置池镜像

1. 确保 数据池 中的所有镜像都启用了专用锁定和日志。详情请查看 第 4.1 节 “启用日志”。

2. 在 site-b 集群的客户端节点上，安装 rbd-mirror 软件包。软件包由 Red Hat Ceph Storage 3 Tools 存储库提供。

   Red Hat Enterprise Linux

   # yum install rbd-mirror

   Copy to Clipboard Toggle word wrap

   Ubuntu

   $ sudo apt-get install rbd-mirror

   Copy to Clipboard Toggle word wrap

3. 在 site-b 集群的客户端节点上，通过在适当的文件中添加 CLUSTER 选项来指定集群名称。在 Red Hat Enterprise Linux 上，更新 /etc/sysconfig/ceph 文件，并在 Ubuntu 中相应地更新 /etc/default/ceph 文件：

   CLUSTER=site-b

   Copy to Clipboard Toggle word wrap

4. 在这两个集群中，创建具有访问 数据池 权限的用户，并将其密钥环输出到 < cluster-name>.client.<user-name>.keyring 文件。

   1. 在 site-a 集群中的 monitor 主机上，创建 client.site-a 用户，并将密钥环输出到 site-a.client.site-a.keyring 文件：

      # ceph auth get-or-create client.site-a mon 'profile rbd' osd 'profile rbd pool=data' -o /etc/ceph/site-a.client.site-a.keyring

      Copy to Clipboard Toggle word wrap

   2. 在 site-b 集群中的 monitor 主机上，创建 client.site-b 用户，并将密钥环输出到 site-b.client.site-b.keyring 文件：

      # ceph auth get-or-create client.site-b mon 'profile rbd' osd 'profile rbd pool=data' -o /etc/ceph/site-b.client.site-b.keyring

      Copy to Clipboard Toggle word wrap

5. 将 Ceph 配置文件和新创建的 RBD 密钥环文件从 site-a 监控节点复制到 site-b 监控和客户端节点：

   # scp /etc/ceph/ceph.conf <user>@<site-b_mon-host-name>:/etc/ceph/site-a.conf
   # scp /etc/ceph/site-a.client.site-a.keyring <user>@<site-b_mon-host-name>:/etc/ceph/
   
   # scp /etc/ceph/ceph.conf <user>@<site-b_client-host-name>:/etc/ceph/site-a.conf
   # scp /etc/ceph/site-a.client.site-a.keyring <user>@<site-b_client-host-name>:/etc/ceph/

   Copy to Clipboard Toggle word wrap
   注意

   将 Ceph 配置文件从 site-a 监控节点传输到 site-b 监视器和客户端节点的 scp 命令，将文件重命名为 site-a.conf。密钥环文件名保持不变。

6. 在 site-b 集群客户端节点上创建一个名为 site-b.conf 的符号链接，指向 ceph.conf ：

   # cd /etc/ceph
   # ln -s ceph.conf site-b.conf

   Copy to Clipboard Toggle word wrap

7. 在 site-b 客户端节点上启用并启动 rbd-mirror 守护进程：

   systemctl enable ceph-rbd-mirror.target
   systemctl enable ceph-rbd-mirror@<client-id>
   systemctl start ceph-rbd-mirror@<client-id>

   Copy to Clipboard Toggle word wrap

   将 <client-id > 更改为 rbd-mirror 守护进程要使用的 Ceph Storage 集群用户。用户必须具有对集群的适当 cephx 访问权限。如需更多信息，请参阅 Red Hat Ceph Storage 3 管理指南中的用户管理一 章。

   根据使用 site-b 的前导示例，运行以下命令：

   # systemctl enable ceph-rbd-mirror.target
   # systemctl enable ceph-rbd-mirror@site-b
   # systemctl start ceph-rbd-mirror@site-b

   Copy to Clipboard Toggle word wrap

8. 在 site-a 集群的监控节点上运行以下命令来启用位于 site-a 集群上的 数据池 镜像：

   # rbd mirror pool enable data pool

   Copy to Clipboard Toggle word wrap

   确保成功启用了镜像：

   # rbd mirror pool info data
   Mode: pool
   Peers: none

   Copy to Clipboard Toggle word wrap

9. 从 site-b 集群中的客户端节点运行以下命令来将 site-a 集群添加为 site-b 集群的对等点：

   # rbd --cluster site-b mirror pool peer add data client.site-a@site-a -n client.site-b

   Copy to Clipboard Toggle word wrap

   确保已成功添加 peer：

   # rbd mirror pool info data
   Mode: pool
   Peers:
     UUID                                 NAME   CLIENT
     7e90b4ce-e36d-4f07-8cbc-42050896825d site-a client.site-a

   Copy to Clipboard Toggle word wrap

10. 一段时间后，检查 image1 和 image2 镜像的状态。如果它们处于 up+replaying 状态，则镜像可以正常工作。从 site-b 集群中的监控节点运行以下命令：

    # rbd mirror image status data/image1
    image1:
      global_id:   7d486c3f-d5a1-4bee-ae53-6c4f1e0c8eac
      state:       up+replaying
      description: replaying, master_position=[object_number=3, tag_tid=1, entry_tid=3], mirror_position=[object_number=3, tag_tid=1, entry_tid=3], entries_behind_master=0
      last_update: 2019-04-22 13:19:27

    Copy to Clipboard Toggle word wrap

    # rbd mirror image status data/image2
    image2:
      global_id:   703c4082-100d-44be-a54a-52e6052435a5
      state:       up+replaying
      description: replaying, master_position=[object_number=3, tag_tid=1, entry_tid=3], mirror_position=[], entries_behind_master=3
      last_update: 2019-04-22 13:19:19

    Copy to Clipboard Toggle word wrap

配置镜像镜像

1. 确保 数据 池中的所选镜像启用了专用锁定和日志。详情请查看 第 4.1 节 “启用日志”。
2. 按照 配置池镜像 步骤中的步骤 2 - 7。

3. 在 site-a 集群中的监控节点中，启用 数据池 的镜像镜像：

   # rbd mirror pool enable data image

   Copy to Clipboard Toggle word wrap

   确保成功启用了镜像：

   # rbd mirror pool info data
   Mode: image
   Peers: none

   Copy to Clipboard Toggle word wrap

4. 在 site-b 集群上的客户端节点中，将 site-a 集群添加为对等集群：

   # rbd --cluster site-b mirror pool peer add data client.site-a@site-a -n client.site-b

   Copy to Clipboard Toggle word wrap

   确保已成功添加 peer：

   # rbd mirror pool info data
   Mode: image
   Peers:
     UUID                                 NAME   CLIENT
     9c1da891-b9f4-4644-adee-6268fe398bf1 site-a client.site-a

   Copy to Clipboard Toggle word wrap

5. 在 site-a 集群的监控节点中，明确启用 image1 和 image2 镜像的镜像镜像：

   # rbd mirror image enable data/image1
   Mirroring enabled
   # rbd mirror image enable data/image2
   Mirroring enabled

   Copy to Clipboard Toggle word wrap

6. 一段时间后，检查 image1 和 image2 镜像的状态。如果它们处于 up+replaying 状态，则镜像可以正常工作。从 site-b 集群中的监控节点运行以下命令：

   # rbd mirror image status data/image1
   image1:
     global_id:   08027096-d267-47f8-b52e-59de1353a034
     state:       up+replaying
     description: replaying, master_position=[object_number=3, tag_tid=1, entry_tid=3], mirror_position=[object_number=3, tag_tid=1, entry_tid=3], entries_behind_master=0
     last_update: 2019-04-12 17:24:04

   Copy to Clipboard Toggle word wrap

   # rbd mirror image status data/image2
   image2:
     global_id:   596f41bc-874b-4cd4-aefe-4929578cc834
     state:       up+replaying
     description: replaying, master_position=[object_number=3, tag_tid=1, entry_tid=3], mirror_position=[object_number=3, tag_tid=1, entry_tid=3], entries_behind_master=0
     last_update: 2019-04-12 17:23:51

   Copy to Clipboard Toggle word wrap