补救、隔离和维护

流程

1. 在 Red Hat OpenShift Web 控制台中导航至 Operators → OperatorHub。
2. 从可用的 Operator 列表中选择 Self Node Remediation Operator，然后点 Install。
3. 保留安装模式和命名空间的默认选择，以确保将 Operator 安装到 openshift-operators 命名空间中。
4. 点 Install。

1. 进入到 Operators → Installed Operators 页面。
2. 检查 Operator 是否安装在 openshift-operators 命名空间中，其状态是否为 Succeeded。

1. 导航到 Operators → Installed Operators 页面，并检查 Status 列中是否有任何错误或故障。
2. 进入到 Workloads → Pods 页面，检查 openshift-operators 项目中的 self-node-remediation-controller-manager pod 和 self-node-remediation-ds pod 的日志。

流程

1. 为 Self Node Remediation Operator 创建 Namespace 自定义资源(CR)：

   1. 定义 Namespace CR 并保存 YAML 文件，如 self-node-remediation-namespace.yaml ：

      apiVersion: v1
      kind: Namespace
      metadata:
        name: self-node-remediation

   2. 要创建 Namespace CR，请运行以下命令：

      $ oc create -f self-node-remediation-namespace.yaml

2. 创建 OperatorGroup CR：

   1. 定义 OperatorGroup CR 并保存 YAML 文件，如 self-node-remediation-operator-group.yaml ：

      apiVersion: operators.coreos.com/v1
      kind: OperatorGroup
      metadata:
        name: self-node-remediation-operator
        namespace: self-node-remediation

   2. 要创建 OperatorGroup CR，请运行以下命令：

      $ oc create -f self-node-remediation-operator-group.yaml

3. 创建一个 Subscription CR：

   1. 定义 Subscription CR 并保存 YAML 文件，如 self-node-remediation-subscription.yaml ：

      apiVersion: operators.coreos.com/v1alpha1
      kind: Subscription
      metadata:
          name: self-node-remediation-operator
          namespace: self-node-remediation 1
      spec:
          channel: stable
          installPlanApproval: Manual 2
          name: self-node-remediation-operator
          source: redhat-operators
          sourceNamespace: openshift-marketplace
          package: self-node-remediation

      1

      指定要安装 Self Node Remediation Operator 的命名空间。要在 openshift-operators 命名空间中安装 Self Node Remediation Operator，在 Subscription CR 中指定 openshift-operators。

      2

      如果您的指定版本被目录中的后续版本取代，则将批准策略设置为 Manual。此计划阻止自动升级到更新的版本，且需要在启动 CSV 可以完成安装前手动批准。

   2. 要创建 Subscription CR，请运行以下命令：

      $ oc create -f self-node-remediation-subscription.yaml

验证

1. 检查 CSV 资源来验证安装是否成功：

   $ oc get csv -n self-node-remediation

   输出示例

   NAME                               DISPLAY                          VERSION   REPLACES   PHASE
   self-node-remediation.v.0.6.0      Self Node Remediation Operator   v.0.6.0              Succeeded

2. 验证 Self Node Remediation Operator 是否正在运行：

   $ oc get deploy -n self-node-remediation

   输出示例

   NAME                                        READY   UP-TO-DATE   AVAILABLE   AGE
   self-node-remediation-controller-manager    1/1     1            1           28h

3. 验证 Self Node Remediation Operator 是否已创建 SelfNodeRemediationConfig CR:

   $ oc get selfnoderemediationconfig -n self-node-remediation

   输出示例

   NAME                           AGE
   self-node-remediation-config   28h

4. 验证每个自节点补救 pod 是否已调度并在每个 worker 节点和 control plane 节点上运行：

   $ oc get daemonset -n self-node-remediation

   输出示例

   NAME                      DESIRED  CURRENT  READY  UP-TO-DATE  AVAILABLE  NODE SELECTOR  AGE
   self-node-remediation-ds  6        6        6      6           6          <none>         28h

流程

1. 创建 SelfNodeRemediationTemplate CR：

   1. 定义 SelfNodeRemediationTemplate CR：

      apiVersion: self-node-remediation.medik8s.io/v1alpha1
      kind: SelfNodeRemediationTemplate
      metadata:
        namespace: openshift-machine-api
        name: selfnoderemediationtemplate-sample
      spec:
        template:
          spec:
            remediationStrategy: ResourceDeletion 1

      1

      指定补救策略。默认策略是 ResourceDeletion。

   2. 要创建 SelfNodeRemediationTemplate CR，请运行以下命令：

      $ oc create -f <snrt-name>.yaml

2. 创建或更新 MachineHealthCheck CR 以指向 SelfNodeRemediationTemplate CR：

   1. 定义或更新 MachineHealthCheck CR：

      apiVersion: machine.openshift.io/v1beta1
      kind: MachineHealthCheck
      metadata:
        name: machine-health-check
        namespace: openshift-machine-api
      spec:
        selector:
          matchLabels: 1
            machine.openshift.io/cluster-api-machine-role: "worker"
            machine.openshift.io/cluster-api-machine-type: "worker"
        unhealthyConditions:
        - type:    "Ready"
          timeout: "300s"
          status: "False"
        - type:    "Ready"
          timeout: "300s"
          status: "Unknown"
        maxUnhealthy: "40%"
        nodeStartupTimeout: "10m"
        remediationTemplate: 2
          kind: SelfNodeRemediationTemplate
          apiVersion: self-node-remediation.medik8s.io/v1alpha1
          name: selfnoderemediationtemplate-sample

      1

      选择机器健康检查是否为 worker 还是 control-plane 节点。标签也可以是用户定义的。

      2

      指定补救模板的详情。

   2. 要创建 MachineHealthCheck CR，请运行以下命令：

      $ oc create -f <mhc-name>.yaml

   3. 要更新 MachineHealthCheck CR，请运行以下命令：

      $ oc apply -f <mhc-name>.yaml

流程

1. 在 Red Hat OpenShift Web 控制台中导航至 Operators → OperatorHub。
2. 搜索 Node Health Check Operator，然后点 Install。
3. 保留安装模式和命名空间的默认选择，以确保将 Operator 安装到 openshift-operators 命名空间中。
4. 确保 Console 插件 被设置为 Enable。
5. 点 Install。

1. 进入到 Operators → Installed Operators 页面。
2. 检查 Operator 是否安装在 openshift-operators 命名空间中，其状态是否为 Succeeded。

1. 导航到 Operators → Installed Operators 页面，并检查 Status 列中是否有任何错误或故障。
2. 导航到 Workloads → Pods 页面，并检查 openshift-operators 项目中报告问题的 pod 的日志。

流程

1. 为 Node Health Check Operator 创建 Namespace 自定义资源 (CR)：

   1. 定义 Namespace CR 并保存 YAML 文件，如 node-health-check-namespace.yaml ：

      apiVersion: v1
      kind: Namespace
      metadata:
        name: node-health-check

   2. 要创建 Namespace CR，请运行以下命令：

      $ oc create -f node-health-check-namespace.yaml

2. 创建 OperatorGroup CR：

   1. 定义 OperatorGroup CR 并保存 YAML 文件，如 node-health-check-operator-group.yaml ：

      apiVersion: operators.coreos.com/v1
      kind: OperatorGroup
      metadata:
        name: node-health-check-operator
        namespace: node-health-check

   2. 要创建 OperatorGroup CR，请运行以下命令：

      $ oc create -f node-health-check-operator-group.yaml

3. 创建一个 Subscription CR：

   1. 定义 Subscription CR 并保存 YAML 文件，如 node-health-check-subscription.yaml ：

      apiVersion: operators.coreos.com/v1alpha1
      kind: Subscription
      metadata:
          name: node-health-check-operator
          namespace: node-health-check 1
      spec:
          channel: stable 2
          installPlanApproval: Manual 3
          name: node-healthcheck-operator
          source: redhat-operators
          sourceNamespace: openshift-marketplace
          package: node-healthcheck-operator

      1

      指定您要安装 Node Health Check Operator 的命名空间。要在 openshift-operators 命名空间中安装 Node Health Check Operator，请在 Subscription CR 中指定 openshift-operators。

      2

      指定订阅的频道名称。要升级到 Node Health Check Operator 的最新版本，您必须手动将订阅的频道名称从 candidate 改为 stable。

      3

      如果您的指定版本被目录中的后续版本取代，则将批准策略设置为 Manual。此计划阻止自动升级到更新的版本，且需要在启动 CSV 可以完成安装前手动批准。

   2. 要创建 Subscription CR，请运行以下命令：

      $ oc create -f node-health-check-subscription.yaml

验证

1. 检查 CSV 资源来验证安装是否成功：

   $ oc get csv -n openshift-operators

   输出示例

   NAME                              DISPLAY                     VERSION  REPLACES PHASE
   node-healthcheck-operator.v0.5.0. Node Health Check Operator  0.5.0             Succeeded

2. 验证 Node Health Check Operator 是否正在运行：

   $ oc get deploy -n openshift-operators

   输出示例

   NAME                                           READY   UP-TO-DATE   AVAILABLE   AGE
   node-health-check-operator-controller-manager  1/1     1            1           10d

流程

1. 从 Red Hat OpenShift Web 控制台的 Administrator 视角中，点 Compute → NodeHealthChecks → CreateNodeHealthCheck。
2. 指定是否使用 Form view 或 YAML 视图配置节点健康检查。
3. 输入节点健康检查的名称。名称必须包含小写、字母数字字符、'-' 或 '.'，且必须以字母数字字符开头和结尾。
4. 指定 Remediator 类型，以及 Self node remediation 或其他。Self 节点补救选项是安装 Node Health Check Operator 的 Self Node Remediation Operator 的一部分。选择 Other 需要输入 API 版本、Kind、Name 和 Namespace，然后指向补救器的补救模板资源。

5. 通过指定要修复的 Nodes 标签来创建节点选择。选择与要检查的标签匹配。如果指定了多个标签，节点必须包含每个标签。默认值为空，用于选择 worker 和 control-plane 节点。

   注意

   使用 Self Node Remediation Operator 创建节点健康检查时，您必须选择 node-role.kubernetes.io/worker 或 node-role.kubernetes.io/control-plane 作为值。

6. 使用 NodeHealthCheck 来修复目标池中的节点所需的最小健康节点数量（百分比或数字）。如果健康的节点数量等于或超过 Min healthy 设定的限制，则会出现补救。默认值为 51%。
7. 指定一个非健康条件列表，在决定一个端点被认为是非健康以及需要的补救时使用这些条件。您可以指定 Type、Status 和 Duration。您还可以创建自己的自定义类型。
8. 点 Create 创建节点健康检查。