5.4. 关于 all-multicast 模式

流程

1. 使用以下设置创建一个 YAML 文件，为 Mellanox ConnectX-5 设备定义 SriovNetworkNodePolicy 对象。将 YAML 文件保存为 sriovnetpolicy-mlx.yaml。

   apiVersion: sriovnetwork.openshift.io/v1
   kind: SriovNetworkNodePolicy
   metadata:
     name: sriovnetpolicy-mlx
     namespace: openshift-sriov-network-operator
   spec:
     deviceType: netdevice
     nicSelector:
       deviceID: "1017"
       pfNames:
         - ens8f0np0#0-9
       rootDevices:
         - 0000:d8:00.0
       vendor: "15b3"
     nodeSelector:
       feature.node.kubernetes.io/network-sriov.capable: "true"
     numVfs: 10
     priority: 99
     resourceName: resourcemlx

   Copy to Clipboard Toggle word wrap
2. 可选：如果支持 SR-IOV 的集群节点还没有标记，请添加 SriovNetworkNodePolicy.Spec.NodeSelector 标签。有关标记节点的更多信息，请参阅"了解如何更新节点上的标签"。

3. 运行以下命令来创建 SriovNetworkNodePolicy 对象：

   $ oc create -f sriovnetpolicy-mlx.yaml

   Copy to Clipboard Toggle word wrap

   应用配置更新后，sriov-network-operator 命名空间中的所有 pod 会自动进入 Running 状态。

4. 运行以下命令来创建 enable-allmulti-test 命名空间：

   $ oc create namespace enable-allmulti-test

   Copy to Clipboard Toggle word wrap

5. 为额外 SR-IOV 网络附加创建 SriovNetwork 自定义资源 (CR) 并插入 metaPlugins 配置，如下例所示，并将该文件保存为 sriov-enable-all-multicast.yaml。

   apiVersion: sriovnetwork.openshift.io/v1
   kind: SriovNetwork
   metadata:
     name: enableallmulti 

   1

   
     namespace: openshift-sriov-network-operator 

   2

   
   spec:
     resourceName: enableallmulti 

   3

   
     networkNamespace: enable-allmulti-test 

   4

   
     ipam: '{ "type": "static" }' 

   5

   
     capabilities: '{ "mac": true, "ips": true }' 

   6

   
     trust: "on" 

   7

   
     metaPlugins : | 

   8

   
       {
         "type": "tuning",
         "capabilities":{
           "mac":true
         },
         "allmulti": true
         }
       }

   Copy to Clipboard Toggle word wrap

   1

   指定对象的名称。SR-IOV Network Operator 创建一个名称相同的 NetworkAttachmentDefinition 对象。

   2

   指定 SR-IOV Network Operator 安装到的命名空间。

   3

   指定来自用于为这个额外网络定义 SR-IOV 硬件的 SriovNetworkNodePolicy 对象的 spec.resourceName 参数的值。

   4

   为 SriovNetwork 对象指定目标命名空间。只有目标命名空间中的 pod 可以附加到额外网络。

   5

   为 IPAM CNI 插件指定一个配置对象作为 YAML 块 scalar。该插件管理附加定义的 IP 地址分配。

   6

   可选：为额外网络设置功能。您可以指定 "{ "ips": true }" 来启用 IP 地址支持，或指定 "{ "mac": true }" 来启用 MAC 地址支持。

   7

   指定虚拟功能的信任模式。这必须设置为 "on"。

   8

   使用 metaPlugins 参数为设备添加更多功能。在此用例中，将 type 字段设置为 tuning，并添加 allmulti 字段，并将它设为 true。

6. 运行以下命令来创建 SriovNetwork 资源：

   $ oc create -f sriov-enable-all-multicast.yaml

   Copy to Clipboard Toggle word wrap

1. 创建 Pod CR。将以下 YAML 示例保存到名为 examplepod.yaml 的文件中：

   apiVersion: v1
   kind: Pod
   metadata:
     name: samplepod
     namespace: enable-allmulti-test
     annotations:
       k8s.v1.cni.cncf.io/networks: |-
         [
           {
             "name": "enableallmulti",  

   1

   
             "mac": "0a:56:0a:83:04:0c", 

   2

   
             "ips": ["10.100.100.200/24"] 

   3

   
          }
         ]
   spec:
     containers:
     - name: podexample
       image: centos
       command: ["/bin/bash", "-c", "sleep INF"]
       securityContext:
         runAsUser: 2000
         runAsGroup: 3000
         allowPrivilegeEscalation: false
         capabilities:
           drop: ["ALL"]
     securityContext:
       runAsNonRoot: true
       seccompProfile:
         type: RuntimeDefault

   Copy to Clipboard Toggle word wrap

   1

   指定 SR-IOV 网络附加定义 CR 的名称。

   2

   可选：指定从 SR-IOV 网络附加定义 CR 中定义的资源类型分配的 SR-IOV 设备的 MAC 地址。要使用这个功能，还必须在 SriovNetwork 对象中指定 {"mac": true}。

   3

   可选：指定从 SR-IOV 网络附加定义 CR 中定义的资源类型分配的 SR-IOV 设备的 IP 地址。支持 IPv4 和 IPv6 IP 地址。要使用这个功能，还必须在 SriovNetwork 对象中指定 { "ips": true }。

2. 运行以下命令来创建 Pod CR：

   $ oc apply -f examplepod.yaml

   Copy to Clipboard Toggle word wrap

3. 运行以下命令验证 pod 是否已创建：

   $ oc get pod -n enable-allmulti-test

   Copy to Clipboard Toggle word wrap

   输出示例

   NAME       READY   STATUS    RESTARTS   AGE
   samplepod  1/1     Running   0          47s

   Copy to Clipboard Toggle word wrap

4. 运行以下命令登录到 pod：

   $ oc rsh -n enable-allmulti-test samplepod

   Copy to Clipboard Toggle word wrap

5. 运行以下命令，列出与 pod 关联的所有接口：

   sh-4.4# ip link

   Copy to Clipboard Toggle word wrap

   输出示例

   1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN mode DEFAULT group default qlen 1000
       link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
   2: eth0@if22: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 8901 qdisc noqueue state UP mode DEFAULT group default
       link/ether 0a:58:0a:83:00:10 brd ff:ff:ff:ff:ff:ff link-netnsid 0 

   1

   
   3: net1@if24: <BROADCAST,MULTICAST,ALLMULTI,UP,LOWER_UP> mtu 1500 qdisc noqueue state UP mode DEFAULT group default
       link/ether ee:9b:66:a4:ec:1d brd ff:ff:ff:ff:ff:ff link-netnsid 0 

   2

   Copy to Clipboard Toggle word wrap

   1

   eth0@if22 是主接口

   2

   net1@if24 是配置了 network-attachment-definition 的二级接口，它支持 all-multicast 模式(ALLMULTI 标志)