4.6. 使用节点污点控制 pod 放置

1. 处理 pod 具有匹配容限的污点。

2. 其余的不匹配污点在 pod 上有指示的 effect：

   • 如果至少有一个不匹配污点具有 NoSchedule effect，则 OpenShift Container Platform 无法将 pod 调度到该节点上。
   • 如果没有不匹配污点具有 NoSchedule effect，但至少有一个不匹配污点具有 PreferNoSchedule effect，则 OpenShift Container Platform 尝试不将 pod 调度到该节点上。

   • 如果至少有一个未匹配污点具有 NoExecute effect，OpenShift Container Platform 会将 pod 从该节点驱除（如果它已在该节点上运行），或者不将 pod 调度到该节点上（如果还没有在该节点上运行）。

     • 不容许污点的 Pod 会立即被驱除。
     • 如果 Pod 容许污点而没有在 Pod 规格中指定 tolerationSeconds，则会永久保持绑定。
     • 如果 Pod 容许污点，且指定了 tolerationSeconds，则会在指定的时间里保持绑定。

流程

1. 通过编辑 Pod spec 使其包含 tolerations 小节来向 pod 添加容限：

   使用 Equal 运算符的 pod 配置文件示例

   apiVersion: v1
   kind: Pod
   metadata:
     name: my-pod
   #...
   spec:
     tolerations:
     - key: "key1" 1
       value: "value1"
       operator: "Equal"
       effect: "NoExecute"
       tolerationSeconds: 3600 2
   #...

   1

   容限参数，如 Taint 和 toleration 组件表中所述。

   2

   tolerationSeconds 参数指定 pod 在被驱除前与节点绑定的时长。

   例如：

   使用 Exists 运算符的 pod 配置文件示例

   apiVersion: v1
   kind: Pod
   metadata:
     name: my-pod
   #...
   spec:
     tolerations:
     - key: "key1"
       operator: "Exists"
       effect: "NoExecute"
       tolerationSeconds: 3600
   #...

2. 将污点添加到 MachineSet 对象：

   1. 为您想要污点的节点编辑 MachineSet YAML，也可以创建新 MachineSet 对象：

      $ oc edit machineset <machineset>

   2. 将污点添加到 spec.template.spec 部分：

      机器集规格中的污点示例

      apiVersion: machine.openshift.io/v1beta1
      kind: MachineSet
      metadata:
        name: my-machineset
      #...
      spec:
      #...
        template:
      #...
          spec:
            taints:
            - effect: NoExecute
              key: key1
              value: value1
      #...

      本例在节点上放置一个键为 key1，值为 value1 的污点，污点效果是 NoExecute。

   3. 将机器缩减为 0:

      $ oc scale --replicas=0 machineset <machineset> -n openshift-machine-api

      提示

      您还可以应用以下 YAML 来扩展机器集：

      apiVersion: machine.openshift.io/v1beta1
      kind: MachineSet
      metadata:
        name: <machineset>
        namespace: openshift-machine-api
      spec:
        replicas: 0

      等待机器被删除。

   4. 根据需要扩展机器设置：

      $ oc scale --replicas=2 machineset <machineset> -n openshift-machine-api

      或者：

      $ oc edit machineset <machineset> -n openshift-machine-api

      等待机器启动。污点添加到与 MachineSet 对象关联的节点上。

1. 为这些节点添加对应的污点：

   例如：

   $ oc adm taint nodes node1 dedicated=groupName:NoSchedule

   提示

   您还可以应用以下 YAML 来添加污点：

   kind: Node
   apiVersion: v1
   metadata:
     name: my-node
   #...
   spec:
     taints:
       - key: dedicated
         value: groupName
         effect: NoSchedule
   #...

2. 通过编写自定义准入控制器，为 pod 添加容限。

流程

1. 创建 Project 资源定义，在 metadata.annotations 部分指定节点选择器和容限：

   project.yaml 文件示例

   kind: Project
   apiVersion: project.openshift.io/v1
   metadata:
     name: <project_name> 1
     annotations:
       openshift.io/node-selector: '<label>' 2
       scheduler.alpha.kubernetes.io/defaultTolerations: >-
         [{"operator": "Exists", "effect": "NoSchedule", "key":
         "<key_name>"} 3
         ]

   1

   项目名称。

   2

   默认节点选择器标签。

   3

   容限参数，如 Taint 和 toleration 组件表中所述。本例使用 NoSchedule effect （允许节点上现有的 pod 保留）和 Exists 运算符（不使用值）。

2. 使用 oc apply 命令来创建项目：

   $ oc apply -f project.yaml

1. 为需要特殊硬件的 pod 添加容限。

   例如：

   apiVersion: v1
   kind: Pod
   metadata:
     name: my-pod
   #...
   spec:
     tolerations:
       - key: "disktype"
         value: "ssd"
         operator: "Equal"
         effect: "NoSchedule"
         tolerationSeconds: 3600
   #...

2. 使用以下命令之一，给拥有特殊硬件的节点添加污点：

   $ oc adm taint nodes <node-name> disktype=ssd:NoSchedule

   或者：

   $ oc adm taint nodes <node-name> disktype=ssd:PreferNoSchedule

   提示

   您还可以应用以下 YAML 来添加污点：

   kind: Node
   apiVersion: v1
   metadata:
     name: my_node
   #...
   spec:
     taints:
       - key: disktype
         value: ssd
         effect: PreferNoSchedule
   #...