19.4. 删除或替换 Compute 节点


在某些情况下,您需要从 overcloud 中删除 Compute 节点。例如,需要替换有问题的 Compute 节点。当您删除 Compute 节点时,节点索引默认添加到 denylist 中,以防止在扩展操作期间重复使用索引。

从 overcloud 部署中移除节点后,您可以替换移除的 Compute 节点。

先决条件

  • 您要删除的节点上禁用了 Compute 服务,以防止节点调度新实例。要确认禁用了 Compute 服务,请使用以下命令:

    (overcloud)$ openstack compute service list

    如果没有禁用 Compute 服务,则禁用它:

    (overcloud)$ openstack compute service set <hostname> nova-compute --disable
    提示

    使用 --disable-reason 选项添加有关为何要禁用该服务的简短说明。如果您打算重新部署 Compute 服务,这非常有用。

  • Compute 节点上的工作负载已迁移到其他 Compute 节点。如需更多信息,请参阅在 Compute 节点之间迁移虚拟机实例
  • 如果启用了实例 HA,请选择以下选项之一:

    • 如果可以访问计算节点,请以 root 用户身份登录计算节点,并使用 shutdown -h now 命令执行清理关闭。
    • 如果无法访问计算节点,以 root 用户身份登录控制器节点,为计算节点禁用 STONITH 设备,并关闭裸机节点:

      [root@controller-0 ~]# pcs stonith disable <stonith_resource_name>
      [stack@undercloud ~]$ source stackrc
      [stack@undercloud ~]$ openstack baremetal node power off <UUID>

流程

  1. 查找 undercloud 配置:

    (overcloud)$ source ~/stackrc
  2. 为您要缩减的角色减少 overcloud-baremetal-deploy.yaml 文件中的 count 参数。
  3. 如果角色的 instances 属性中没有定义您要从堆栈中删除的每个节点的 主机名和 名称
  4. 将属性 provisioned: false 添加到您要删除的节点。例如,要从堆栈中删除节点 overcloud-compute-1,请在 overcloud-baremetal-deploy.yaml 文件中包含以下代码片段:

    - name: Compute
      count: 2
      instances:
      - hostname: overcloud-compute-0
        name: node00
      - hostname: overcloud-compute-1
        name: node01
        # Removed from cluster due to disk failure
        provisioned: false
      - hostname: overcloud-compute-2
        name: node02

    重新部署 overcloud 后,堆栈中不再存在使用 provisioned: false 属性定义的节点。但是,这些节点仍然以置备状态运行。

    注意

    如果要临时从堆栈中删除节点,您可以使用 provisioned: false 属性部署 overcloud,然后使用 provisioned: true 属性重新部署 overcloud,以将节点返回到堆栈。

  5. 从 overcloud 中删除节点:

    (undercloud)$ openstack overcloud node delete \
    --stack <stack> \
    --baremetal-deployment /home/stack/templates/overcloud-baremetal-deploy.yaml
    • & lt;stack> 替换为置备裸机节点的堆栈的名称。如果未指定,则默认为 overcloud

      注意

      不要将您要从堆栈中删除的节点作为命令参数包括在 openstack overcloud node delete 命令中。

  6. 置备 overcloud 节点来生成更新的 heat 环境文件,以包含在部署命令中:

    (undercloud)$ openstack overcloud node provision \
    --stack <stack> \
    --output <deployment_file> \
    /home/stack/templates/overcloud-baremetal-deploy.yaml
    • & lt;stack> 替换为置备裸机节点的堆栈的名称。如果未指定,则默认为 overcloud
    • <deployment_file> 替换为用于部署命令生成的 heat 环境文件的名称,如 /home/stack/templates/overcloud-baremetal-deployed.yaml
  7. 如果启用了 Instance HA,请执行以下操作:

    1. 为节点清理 Pacemaker 资源:

      $ sudo pcs resource delete <scaled_down_node>
      $ sudo cibadmin -o nodes --delete --xml-text '<node id="<scaled_down_node>"/>'
      $ sudo cibadmin -o fencing-topology --delete --xml-text '<fencing-level target="<scaled_down_node>"/>'
      $ sudo cibadmin -o status --delete --xml-text '<node_state id="<scaled_down_node>"/>'
      $ sudo cibadmin -o status --delete-all --xml-text '<node id="<scaled_down_node>"/>' --force
      • <scaled_down_node > 替换为已删除节点的名称。
    2. 删除节点的 STONITH 设备:

      $ sudo pcs stonith delete <device-name>
  8. 如果您要替换 overcloud 部署上移除的 Compute 节点,请参阅 替换移除的 Compute 节点

19.4.1. 手动删除 Compute 节点

如果因为无法访问的节点而导致 openstack overcloud node delete 命令失败,则必须手动从 overcloud 中删除 Compute 节点。

先决条件

流程

  1. 使用 openstack tripleo launch heat 命令启动临时 Heat 进程:

    (undercloud)$ openstack tripleo launch heat --heat-dir /home/stack/overcloud-deploy/overcloud/heat-launcher --restore-db

    该命令在启动 Heat 进程后退出,Heat 进程将作为 podman pod 在后台继续运行。

  2. 使用 podman pod ps 命令验证 ephemeral-heat 进程是否正在运行:

    (undercloud)$ sudo podman pod ps
    POD ID        NAME            STATUS      CREATED        INFRA ID      # OF CONTAINERS
    958b141609b2  ephemeral-heat  Running     2 minutes ago  44447995dbcf  3
  3. 使用 export 命令导出 OS_CLOUD 环境:

    (undercloud)$ export OS_CLOUD=heat
  4. 使用 openstack stack list 命令列出已安装的堆栈:

    (undercloud)$ openstack stack list
    +--------------------------------------+------------+---------+-----------------+----------------------+--------------+
    | ID                                   | Stack Name | Project | Stack Status    | Creation Time        | Updated Time |
    +--------------------------------------+------------+---------+-----------------+----------------------+--------------+
    | 761e2a54-c6f9-4e0f-abe6-c8e0ad51a76c | overcloud  | admin   | CREATE_COMPLETE | 2022-08-29T20:48:37Z | None         |
    +--------------------------------------+------------+---------+-----------------+----------------------+--------------+
  5. 识别您要删除的节点的 UUID:

    (undercloud)$ openstack baremetal node list
  6. 将要删除的节点移到维护模式:

    (undercloud)$ openstack baremetal node maintenance set <node_uuid>
  7. 等待 Compute 服务将其状态与 Bare Metal 服务同步。这可能需要四分钟。
  8. 查找 overcloud 配置:

    (undercloud)$ source ~/overcloudrc
  9. 删除已删除节点的网络代理:

    (overcloud)$ for AGENT in $(openstack network agent list --host <scaled_down_node> -c ID -f value) ; do openstack network agent delete $AGENT ; done
    • <scaled_down_node> 替换为要移除的节点的名称。
  10. 确认 overcloud 上已删除的节点上禁用了 Compute 服务,以防止节点调度新实例:

    (overcloud)$ openstack compute service list

    如果没有禁用 Compute 服务,则禁用它:

    (overcloud)$ openstack compute service set <hostname> nova-compute --disable
    提示

    使用 --disable-reason 选项添加有关为何要禁用该服务的简短说明。如果您打算重新部署 Compute 服务,这非常有用。

  11. 将删除的 Compute 服务作为资源提供商从放置服务中移除:

    (overcloud)$ openstack resource provider list
    (overcloud)$ openstack resource provider delete <uuid>
  12. 查找 undercloud 配置:

    (overcloud)$ source ~/stackrc
  13. 从堆栈中删除 Compute 节点:

    (undercloud)$ openstack overcloud node delete --stack <overcloud> <node>
    • <overcloud> 替换为 overcloud 堆栈的名称或 UUID。
    • 将 & lt;node > 替换为您要删除的 Compute 节点的 Compute 服务主机名或 UUID。

      注意

      如果节点已经关闭,这个命令会返回一个 WARNING 信息:

      Ansible failed, check log at `~/ansible.log`
      WARNING: Scale-down configuration error. Manual cleanup of some actions may be necessary. Continuing with node removal.

      您可以忽略此消息。

  14. 等待 overcloud 节点删除。
  15. 在节点删除完成后,检查 overcloud 栈的状态:

    (undercloud)$ openstack stack list
    表 19.2. 结果
    状态描述

    UPDATE_COMPLETE

    删除操作成功完成。

    UPDATE_FAILED

    删除操作失败。

    如果在维护模式下 overcloud 节点无法删除,则问题可能是硬件。

  16. 如果启用了 Instance HA,请执行以下操作:

    1. 为节点清理 Pacemaker 资源:

      $ sudo pcs resource delete <scaled_down_node>
      $ sudo cibadmin -o nodes --delete --xml-text '<node id="<scaled_down_node>"/>'
      $ sudo cibadmin -o fencing-topology --delete --xml-text '<fencing-level target="<scaled_down_node>"/>'
      $ sudo cibadmin -o status --delete --xml-text '<node_state id="<scaled_down_node>"/>'
      $ sudo cibadmin -o status --delete-all --xml-text '<node id="<scaled_down_node>"/>' --force
    2. 删除节点的 STONITH 设备:

      $ sudo pcs stonith delete <device-name>
  17. 如果您不替换 overcloud 上移除的 Compute 节点,则减少包含节点数的环境文件中的 ComputeCount 参数。此文件通常命名为 overcloud-baremetal-deployed.yaml。例如,如果您删除了一个节点,将节点数从四个节点减小到三个节点:

    parameter_defaults:
      ...
      ComputeCount: 3
      ...

    减少节点数可确保 director 在运行 openstack overcloud deploy 时不置备任何新节点。

    如果您要替换 overcloud 部署上移除的 Compute 节点,请参阅 替换移除的 Compute 节点

19.4.2. 替换删除的 Compute 节点

要替换 overcloud 部署上移除的 Compute 节点,您可以注册并检查新的 Compute 节点,或者重新添加移除的 Compute 节点。您还必须配置 overcloud 以置备节点。

流程

  1. 可选: 要重复使用已删除 Compute 节点的索引,在删除 Compute 节点时为角色配置 RemovalPoliciesModeRemovalPolicies 来替换拒绝列表:

    parameter_defaults:
      <RoleName>RemovalPoliciesMode: update
      <RoleName>RemovalPolicies: [{'resource_list': []}]
  2. 替换删除的 Compute 节点:

    • 若要添加新的 Compute 节点,请注册、检查和标记新节点,以准备它以进行调配。有关更多信息,请参阅 配置和部署 overcloud
    • 要重新添加您手动删除的 Compute 节点,从维护模式中删除该节点:

      (undercloud)$ openstack baremetal node maintenance unset <node_uuid>
  3. 重新运行用于部署现有 overcloud 的 openstack overcloud deploy 命令。
  4. 等待部署过程完成。
  5. 确认 director 已成功注册了新的 Compute 节点:

    (undercloud)$ openstack baremetal node list
  6. 如果您执行了第 1 步,当计算节点被删除时,为角色将 RemovalPoliciesMode 设置为 update,然后您您需要为角色将 RemovalPoliciesMode 重新设置为默认值(append),把计算节点索引添加到当前的拒绝列表中:

    parameter_defaults:
      <RoleName>RemovalPoliciesMode: append
  7. 重新运行用于部署现有 overcloud 的 openstack overcloud deploy 命令。
Red Hat logoGithubRedditYoutubeTwitter

学习

尝试、购买和销售

社区

关于红帽文档

通过我们的产品和服务,以及可以信赖的内容,帮助红帽用户创新并实现他们的目标。

让开源更具包容性

红帽致力于替换我们的代码、文档和 Web 属性中存在问题的语言。欲了解更多详情,请参阅红帽博客.

關於紅帽

我们提供强化的解决方案,使企业能够更轻松地跨平台和环境(从核心数据中心到网络边缘)工作。

© 2024 Red Hat, Inc.