1.3. 在 data plane 节点上配置和部署 Red Hat Ceph Storage

流程

1. 编辑 Red Hat Ceph Storage 配置文件。

2. 添加 Storage 和 Storage Management 网络范围。Red Hat Ceph Storage 使用 Storage 网络作为 Red Hat Ceph Storage public_network，Storage Management 网络作为 cluster_network。

   以下示例是 Storage 网络范围为 172.18.0.0/24 的配置文件条目，Storage Management 网络范围为 172.20.0.0/24 ：

   [global]
   public_network = 172.18.0.0/24
   cluster_network = 172.20.0.0/24

3. 在 Compute 服务和 Ceph OSD 服务之间添加并置界限。应在并置计算服务和 Ceph OSD 服务之间设置界限，以减少 CPU 和内存争用。

   以下是设置了这些边界的 Ceph 配置文件条目的示例：

   [osd]
   osd_memory_target_autotune = true
   osd_numa_auto_affinity = true
   [mgr]
   mgr/cephadm/autotune_memory_target_ratio = 0.2

   在本例中，osd_memory_target_autotune 参数设置为 true，以便 OSD 守护进程根据 osd_memory_target 选项调整内存消耗。autotune_memory_target_ratio 默认为 0.7。这意味着系统总 RAM 的 70% 是非自动调优 Ceph 守护进程所消耗的内存的起点。剩余的内存在 OSD 之间划分；假设所有 OSD 的 osd_memory_target_autotune 设置为 true。对于 HCI 部署，您可以将 mgr/cephadm/autotune_memory_target_ratio 设置为 0.2，以便计算服务有更多内存可用。

   有关服务并置的更多信息，请参阅 在 NUMA 节点的 HCI 环境中并置服务。

   注意

   如果需要在部署后调整这些值，请使用 ceph config set osd <key> <value> 命令。

4. 使用 data plane 节点上编辑的配置文件部署 Ceph Storage：

   $ cephadm bootstrap --config <config_file> --mon-ip <data_plane_node_ip> --skip-monitoring-stack

   • 将 <config_file > 替换为 Ceph 配置文件的名称。

   • 将 <data_plane_node_ip & gt; 替换为安装 Red Hat Ceph Storage 的 data plane 节点的 Storage 网络 IP 地址。

     注意

     cephadm bootstrap 命令中使用 --skip-monitoring-stack 选项，以跳过监控服务的部署。如果之前已作为上述其他流程的一部分部署了监控服务，则确保 Red Hat Ceph Storage 部署成功完成。

     如果还没有部署监控服务，请参阅 Red Hat Ceph Storage 文档来了解启用监控服务的信息和流程。

5. 在第一个 EDPM 节点上启动 Red Hat Ceph Storage 集群后，请参阅 Red Hat Ceph Storage 安装指南中的 Red Hat Ceph Storage 安装，将其他 EDPM 节点添加到 Ceph 集群。

流程

1. 使用 SSH 连接到数据平面节点。

2. 查看 Red Hat Ceph Storage 集群的状态：

   $ cephadm shell -- ceph -s

流程

1. 使用 SSH 连接到数据平面节点。

2. 使用以下命令验证整个 Red Hat Ceph Storage 调优：

   $ ceph config dump | grep numa
   $ ceph config dump | grep autotune
   $ ceph config dump | get mgr

3. 使用以下命令验证 OSD 的调优：

   $ ceph config get <osd_number> osd_memory_target
   $ ceph config get <osd_number> osd_memory_target_autotune
   $ ceph config get <osd_number> osd_numa_auto_affinity

   • 将 <osd_number > 替换为 OSD 的数量。例如，若要引用 OSD 11，可使用 osd.11。

4. 使用以下命令验证 OSD 的默认回填值：

   $ ceph config get <osd_number> osd_recovery_op_priority
   $ ceph config get <osd_number> osd_max_backfills
   $ ceph config get <osd_number> osd_recovery_max_active_hdd
   $ ceph config get <osd_number> osd_recovery_max_active_ssd

   • 将 <osd_number > 替换为 OSD 的数量。例如，若要引用 OSD 11，可使用 osd.11。