5.6. 配置更高的虚拟机工作负载密度

流程

1. 将 kubelet 服务配置为允许交换使用：

   1. 使用以下示例中显示的参数创建或编辑 KubeletConfig 文件：

      apiVersion: machineconfiguration.openshift.io/v1
      kind: KubeletConfig
      metadata:
        name: custom-config
      spec:
        machineConfigPoolSelector:
          matchLabels:
            pools.operator.machineconfiguration.openshift.io/worker: ''  # MCP
            #machine.openshift.io/cluster-api-machine-role: worker # machine
            #node-role.kubernetes.io/worker: '' # node
        kubeletConfig:
          failSwapOn: false

   2. 运行以下命令，等待 worker 节点与新配置同步：

      $ oc wait mcp worker --for condition=Updated=True --timeout=-1s

2. 通过创建 MachineConfig 对象来置备 swap：

   1. 使用下例中所示的 paramaters 创建 MachineConfig 文件：

      apiVersion: machineconfiguration.openshift.io/v1
      kind: MachineConfig
      metadata:
        labels:
          machineconfiguration.openshift.io/role: worker
        name: 90-worker-swap
      spec:
        config:
          ignition:
            version: 3.5.0
          systemd:
            units:
              - contents: |
                  [Unit]
                  Description=Provision and enable swap
                  ConditionFirstBoot=no
                  ConditionPathExists=!/var/tmp/swapfile
      
                  [Service]
                  Type=oneshot
                  Environment=SWAP_SIZE_MB=5000
                  ExecStart=/bin/sh -c "sudo dd if=/dev/zero of=/var/tmp/swapfile count=${SWAP_SIZE_MB} bs=1M && \
                  sudo chmod 600 /var/tmp/swapfile && \
                  sudo mkswap /var/tmp/swapfile && \
                  sudo swapon /var/tmp/swapfile && \
                  free -h"
      
                  [Install]
                  RequiredBy=kubelet-dependencies.target
                enabled: true
                name: swap-provision.service
              - contents: |
                  [Unit]
                  Description=Restrict swap for system slice
                  ConditionFirstBoot=no
      
                  [Service]
                  Type=oneshot
                  ExecStart=/bin/sh -c "sudo systemctl set-property --runtime system.slice MemorySwapMax=0 IODeviceLatencyTargetSec=\"/ 50ms\""
      
                  [Install]
                  RequiredBy=kubelet-dependencies.target
                enabled: true
                name: cgroup-system-slice-config.service

      为了在出现最糟糕的情况时有足够的交换空间，请确保置备的交换空间的数量最少与过量使用 RAM 相同。使用以下公式计算节点上置备的 swap 空间量：

      NODE_SWAP_SPACE = NODE_RAM * (MEMORY_OVER_COMMIT_PERCENT / 100% - 1)

      示例:

      NODE_SWAP_SPACE = 16 GB * (150% / 100% - 1)
                     = 16 GB * (1.5 - 1)
                     = 16 GB * (0.5)
                     =  8 GB

   2. 运行以下命令，等待 worker 节点与新配置同步：

      $ oc wait mcp worker --for condition=Updated=True --timeout=-1s

3. 使用 Web 控制台或 CLI 在 OpenShift Virtualization 中启用内存过量使用。

   • Web 控制台

     1. 在 OpenShift Container Platform web 控制台中，进入 Virtualization Overview Settings General settings Memory density。
     2. 将 Enable memory density 设置为 on。

   • CLI

     • 配置 OpenShift Virtualization 以启用更高的内存密度并设置过量分配率：

       $ oc -n openshift-cnv patch HyperConverged/kubevirt-hyperconverged --type='json' -p='[ \
         { \
         "op": "replace", \
         "path": "/spec/higherWorkloadDensity/memoryOvercommitPercentage", \
         "value": 150 \
         } \
       ]'

       成功输出：

       hyperconverged.hco.kubevirt.io/kubevirt-hyperconverged patched

验证

1. 要验证 wasp-agent 的部署，请运行以下命令：

   $ oc rollout status ds wasp-agent -n openshift-cnv

   如果部署成功，则会显示以下信息：

   输出示例：

   daemon set "wasp-agent" successfully rolled out

2. 要验证是否正确置备了 swap，请完成以下步骤：

   1. 运行以下命令，查看 worker 节点列表：

      $ oc get nodes -l node-role.kubernetes.io/worker

   2. 运行以下命令，从列表中选择节点并显示其内存用量：

      $ oc debug node/<selected_node> -- free -m 

      1

      1

      将 <selected_node> 替换为节点名称。

      如果置备了交换，则 Swap: 行会显示大于零的数量。

      Expand

      表 5.1. 输出示例

      	total	使用的	free	shared	buff/cache	可用
      Mem:	31846	23155	1044	6014	14483	8690
      Swap:	8191	2337	5854

      Show more

3. 运行以下命令验证 OpenShift Virtualization 内存过量使用配置：

   $ oc -n openshift-cnv get HyperConverged/kubevirt-hyperconverged -o jsonpath='{.spec.higherWorkloadDensity}{"\n"}'

   输出示例：

   {"memoryOvercommitPercentage":150}

   返回的值必须与之前配置的值匹配。

流程

1. 运行以下命令来恢复内存过量使用配置：

   $ oc -n openshift-cnv patch HyperConverged/kubevirt-hyperconverged \
     --type='json' \
     -p='[{"op": "remove", "path": "/spec/higherWorkloadDensity"}]'

2. 运行以下命令来删除置备交换内存的 MachineConfig ：

   $ oc delete machineconfig 90-worker-swap

3. 运行以下命令来删除关联的 KubeletConfig 自定义资源(CR)：

   $ oc delete kubeletconfig custom-config

4. 运行以下命令，等待 worker 节点协调，并观察输出：

   $ oc wait mcp worker --for condition=Updated=True --timeout=-1s