网络功能虚拟化规划和配置指南

流程

1. 禁用默认存储库。

   subscription-manager repos --disable=*

   Copy to Clipboard Toggle word wrap

2. 通过网络功能虚拟化(NFV)为 Red Hat OpenStack Platform 启用所需的存储库。

   sudo subscription-manager repos \
   --enable=rhel-7-server-rpms \
   --enable=rhel-7-server-extras-rpms \
   --enable=rhel-7-server-rh-common-rpms \
   --enable=rhel-ha-for-rhel-7-server-rpms \
   --enable=rhel-7-server-openstack-13-rpms \
   --enable=rhel-7-server-nfv-rpms

   Copy to Clipboard Toggle word wrap

1. 生成内置的 ComputeSriov，以定义 OpenStack 集群中的节点，以运行 NeutronSriovAgent、NeutronSriovHostConfig 和默认计算服务。

   # openstack overcloud roles generate \
   -o /home/stack/templates/roles_data.yaml \
   Controller ComputeSriov

   Copy to Clipboard Toggle word wrap

2. 在生成 overcloud_images.yaml 时包括 neutron-sriov.yaml 和 roles_data.yaml 文件，以便 SR-IOV 容器已准备好。

   SERVICES=\
   /usr/share/openstack-tripleo-heat-templates/environments/services
   
   openstack overcloud container image prepare \
   --namespace=registry.redhat.io/rhosp13 \
   --push-destination=192.168.24.1:8787 \
   --prefix=openstack- \
   --tag-from-label {version}-{release} \
   -e ${SERVICES}/neutron-sriov.yaml \
   --roles-file /home/stack/templates/roles_data.yaml \
   --output-env-file=/home/stack/templates/overcloud_images.yaml \
   --output-images-file=/home/stack/local_registry_images.yaml

   Copy to Clipboard Toggle word wrap
   注意

   push-destination IP 地址是您之前使用 undercloud.conf 配置文件中的 local_ip 参数设置的地址。

   如需有关容器镜像准备的更多信息，请参阅 Director 安装和使用。

3. 要将 KernelAgs 和 TunedProfile 参数包含在部署脚本中，请将 /usr/share/openstack-tripleo-heat-templates/environments 中的 host-config-and-reboot.yaml 文件包含在内。

   openstack overcloud deploy --templates \
   … \
   -e /usr/share/openstack-tripleo-heat-templates/environments/host-config-and-reboot.yaml \
   ...

   Copy to Clipboard Toggle word wrap

4. 根据集群需求以及硬件配置，在 parameter_defaults 下配置 SR-IOV 节点的参数。这些设置通常添加到 network-environment.yaml 文件中。

     NeutronNetworkType: 'vlan'
     NeutronNetworkVLANRanges:
       - tenant:22:22
       - tenant:25:25
     NeutronTunnelTypes: ''

   Copy to Clipboard Toggle word wrap

5. 在同一文件中，为 SR-IOV 计算节点配置特定于角色的参数。

   注意

   NeutronSriovNumVFs 参数很快将被弃用，而是使用网络配置模板中的 numvfs 属性。部署后，红帽不支持修改 NeutronSriovNumVFs 参数，也无法修改 numvfs 参数。已知在运行中的环境中更改任何参数，会导致在该 PF 上具有 SR-IOV 端口的所有运行实例永久中断。除非硬重启这些实例，否则 SR-IOV PCI 设备将无法对实例可见。

     ComputeSriovParameters:
       IsolCpusList: "1-19,21-39"
       KernelArgs: "default_hugepagesz=1GB hugepagesz=1G hugepages=32 iommu=pt intel_iommu=on isolcpus=1-19,21-39"
       TunedProfileName: "cpu-partitioning"
       NeutronBridgeMappings:
         - tenant:br-link0
       NeutronPhysicalDevMappings:
         - tenant:p7p1
         - tenant:p7p2
       NeutronSriovNumVFs:
         - p7p1:5
         - p7p2:5
       NovaPCIPassthrough:
         - vendor_id: "8086"
           product_id: "1528"
           address: "0000:06:00.0"
           physical_network: "tenant"
         - vendor_id: "8086"
           product_id: "1528"
           address: "0000:06:00.1"
           physical_network: "tenant"
       NovaVcpuPinSet: '1-19,21-39'
       NovaReservedHostMemory: 4096

   Copy to Clipboard Toggle word wrap
   注意

   在配置 PCI 透传时，不要使用 devname 参数，因为 NIC 的设备名称可能会改变。反之，使用 vendor_id 和 product_id，因为它们更稳定，或者使用 NIC 的地址。有关如何配置 NovaPCIPassthrough 的更多信息，请参阅有关 配置 NovaPCIPassthrough的指南。

6. 在 compute.yaml 网络配置模板中配置启用的 SR-IOV 接口。确保接口被配置为独立 NIC，用于创建 SR-IOV 虚拟功能(VF)：

                - type: interface
                   name: p7p3
                   mtu: 9000
                   use_dhcp: false
                   defroute: false
                   nm_controlled: true
                   hotplug: true
   
                 - type: interface
                   name: p7p4
                   mtu: 9000
                   use_dhcp: false
                   defroute: false
                   nm_controlled: true
                   hotplug: true

   Copy to Clipboard Toggle word wrap

7. 确保默认过滤器列表包含值 AggregateInstanceExtraSpecsFilter。

   NovaSchedulerDefaultFilters: ['AvailabilityZoneFilter','RamFilter','ComputeFilter','ComputeCapabilitiesFilter','ImagePropertiesFilter','ServerGroupAntiAffinityFilter','ServerGroupAffinityFilter','PciPassthroughFilter','AggregateInstanceExtraSpecsFilter']

   Copy to Clipboard Toggle word wrap
8. 部署 overcloud。

流程

1. 生成 ComputeSriov 角色：

   openstack overcloud roles generate -o roles_data.yaml Controller ComputeSriov

   Copy to Clipboard Toggle word wrap
2. 将 OvsHwOffload 参数添加到特定于角色的参数下，值为 true。
3. 要将 neutron 配置为使用 iptables/hybrid 防火墙驱动程序实现，请包括： NeutronOVSFirewallDriver: iptables_hybrid。有关 NeutronOVSFirewallDriver 的更多信息，请参阅高级 Overcloud 自定义指南中的 使用 Open vSwitch 防火墙。

4. 配置 physical_network 参数以匹配您的环境。

   • 对于 VLAN，请在部署后将 physical_network 参数设置为您在 neutron 中创建的网络名称。此值也应位于 NeutronBridgeMappings 中。

   • 对于 VXLAN，将 physical_network 参数设置为 null。

     例如：

     parameter_defaults:
       NeutronOVSFirewallDriver: iptables_hybrid
       ComputeSriovParameters:
         IsolCpusList: 2-9,21-29,11-19,31-39
         KernelArgs: "default_hugepagesz=1GB hugepagesz=1G hugepages=128 intel_iommu=on iommu=pt"
         OvsHwOffload: true
         TunedProfileName: "cpu-partitioning"
         NeutronBridgeMappings:
           - tenant:br-tenant
         NovaPCIPassthrough:
           - vendor_id: <vendor-id>
             product_id: <product-id>
             address: <address>
             physical_network: "tenant"
           - vendor_id: <vendor-id>
             product_id: <product-id>
             address: <address>
             physical_network: "null"
         NovaReservedHostMemory: 4096
         NovaComputeCpuDedicatedSet: 1-9,21-29,11-19,31-39

     Copy to Clipboard Toggle word wrap
   • 将 <vendor-id > 替换为物理 NIC 的供应商 ID。
   • 将 <product-id > 替换为 NIC VF 的产品 ID。

   • 将 < address> 替换为物理 NIC 的地址。

     有关如何配置 NovaPCIPassthrough 的更多信息，请参阅有关 配置 NovaPCIPassthrough的指南。

5. 确保默认过滤器列表包含 NUMATopologyFilter ：

     NovaSchedulerDefaultFilters: [\'RetryFilter',\'AvailabilityZoneFilter',\'ComputeFilter',\'ComputeCapabilitiesFilter',\'ImagePropertiesFilter',\'ServerGroupAntiAffinityFilter',\'ServerGroupAffinityFilter',\'PciPassthroughFilter',\'NUMATopologyFilter']

   Copy to Clipboard Toggle word wrap

6. 在 compute-sriov.yaml 配置文件中配置用于硬件卸载的一个或多个网络接口：

     - type: ovs_bridge
       name: br-tenant
       mtu: 9000
       members:
       - type: sriov_pf
         name: p7p1
         numvfs: 5
         mtu: 9000
         primary: true
         promisc: true
         use_dhcp: false
         link_mode: switchdev

   Copy to Clipboard Toggle word wrap
   注意
   • 在配置 Open vSwitch 硬件卸载时，不要使用 NeutronSriovNumVFs 参数。虚拟功能的数量使用 os-net-config 使用的网络配置文件中的 numvfs 参数指定。红帽不支持在更新或重新部署过程中修改 numvfs 设置。
   • 不要将 Mellanox 网络接口配置为 nic-config 接口类型 ovs-vlan，因为这会阻止 VXLAN 等隧道端点会因为驱动程序限制而传递流量。

7. 在 overcloud deploy 命令中包含 ovs-hw-offload.yaml 文件：

   TEMPLATES_HOME=”/usr/share/openstack-tripleo-heat-templates”
   CUSTOM_TEMPLATES=”/home/stack/templates”
   
   openstack overcloud deploy --templates \
     -r ${CUSTOM_TEMPLATES}/roles_data.yaml \
     -e ${TEMPLATES_HOME}/environments/ovs-hw-offload.yaml \
     -e ${CUSTOM_TEMPLATES}/network-environment.yaml \
     -e ${CUSTOM_TEMPLATES}/neutron-ovs.yaml

   Copy to Clipboard Toggle word wrap

1. 创建类别。

   # openstack flavor create <flavor> --ram <MB> --disk <GB> --vcpus <#>

   Copy to Clipboard Toggle word wrap

2. 创建网络。

   # openstack network create net1 --provider-physical-network tenant --provider-network-type vlan --provider-segment <VLAN-ID>
   # openstack subnet create subnet1 --network net1 --subnet-range 192.0.2.0/24 --dhcp

   Copy to Clipboard Toggle word wrap

3. 创建端口。

   • 使用 vnic-type 直接创建 SR-IOV 虚拟功能(VF)端口。

     # openstack port create --network net1 --vnic-type direct sriov_port

     Copy to Clipboard Toggle word wrap

   • 使用以下命令创建带有硬件卸载的虚拟功能。

     # openstack port create --network net1 --vnic-type direct --binding-profile '{"capabilities": ["switchdev"]} sriov_hwoffload_port

     Copy to Clipboard Toggle word wrap

   • 使用 vnic-type direct-physical 创建 SR-IOV PF 端口。

     # openstack port create --network net1 --vnic-type direct-physical sriov_port

     Copy to Clipboard Toggle word wrap

4. 部署实例

   # openstack server create --flavor <flavor> --image <image> --nic port-id=<id> <instance name>

   Copy to Clipboard Toggle word wrap

1. 您可以在部署前通过 heat 参数 NovaSchedulerDefaultFilters 在 nova.conf 配置文件中配置 AggregateInstanceExtraSpecs 值 和其他必要的过滤器。

     parameter_defaults:
       NovaSchedulerDefaultFilters: ['AggregateInstanceExtraSpecsFilter', 'RetryFilter','AvailabilityZoneFilter','RamFilter','ComputeFilter','ComputeCapabilitiesFilter','ImagePropertiesFilter','ServerGroupAntiAffinityFilter','ServerGroupAffinityFilter','PciPassthroughFilter','NUMATopologyFilter']

   Copy to Clipboard Toggle word wrap
   注意

   要将 AggregateInstanceExtraSpecsFilter 配置添加到退出的集群，您可以在 heat 模板中添加此参数，然后再次运行原始部署脚本。

2. 为单根 I/O 虚拟化(SR-IOV)创建一个聚合组，并添加相关主机。定义与定义的类别元数据匹配的 metadata，如 sriov=true。

   # openstack aggregate create sriov_group
   # openstack aggregate add host sriov_group compute-sriov-0.localdomain
   # openstack aggregate set --property sriov=true sriov_group

   Copy to Clipboard Toggle word wrap

3. 创建类别。

   # openstack flavor create <flavor> --ram <MB> --disk <GB> --vcpus <#>

   Copy to Clipboard Toggle word wrap

4. 设置其他类别属性。请注意，定义的元数据 sriov=true 与 SR-IOV 聚合上定义的元数据匹配。

   openstack flavor set --property sriov=true --property hw:cpu_policy=dedicated --property hw:mem_page_size=1GB <flavor>

   Copy to Clipboard Toggle word wrap

1. 将 /usr/share/openstack-tripleo-heat-templates/plan-samples/plan-environment-derived-params.yaml 文件复制到一个本地目录，并将输入参数设置为适合您的环境。

     workflow_parameters:
       tripleo.derive_params.v1.derive_parameters:
         # DPDK Parameters # DPDK Parameters # DPDK Parameters #
         # Specifices the minimum number of CPU physical cores to be allocated for DPDK
         # PMD threads. The actual allocation will be based on network config, if
         # the a DPDK port is associated with a numa node, then this configuration
         # will be used, else 1.
         num_phy_cores_per_numa_node_for_pmd: 1
         # Amount of memory to be configured as huge pages in percentage. Ouf the
         # total available memory (excluding the NovaReservedHostMemory), the
         # specified percentage of the remaining is configured as huge pages.
         huge_page_allocation_percentage: 50

   Copy to Clipboard Toggle word wrap

2. 运行 openstack overcloud deploy 命令并包含以下内容：

   • update-plan-only 选项
   • 特定于您的环境的角色文件和所有环境文件

   • plan-environment-derived-parms.yaml 文件，使用 --plan-environment-file 可选参数

     $ openstack overcloud deploy --templates --update-plan-only \
     -r /home/stack/roles_data.yaml \
     -e /home/stack/<environment-file> \
     ... #repeat as necessary ...
     -p /home/stack/plan-environment-derived-params.yaml

     Copy to Clipboard Toggle word wrap

1. 将派生的参数从 plan-environment.yaml 复制到 network-environment.yaml 文件。

     # DPDK compute node.
     ComputeOvsDpdkParameters:
       KernelArgs: default_hugepagesz=1GB hugepagesz=1G hugepages=32 iommu=pt intel_iommu=on isolcpus=1-7,17-23,9-15,25-31
       TunedProfileName: "cpu-partitioning"
       IsolCpusList: "1-7,17-23,9-15,25-31"
       NovaVcpuPinSet: ['2-7,18-23,10-15,26-31']
       NovaReservedHostMemory: 4096
       OvsDpdkSocketMemory: "1024,1024"
       OvsDpdkMemoryChannels: "4"
       OvsDpdkCoreList: "0,16,8,24"
       OvsPmdCoreList: "1,17,9,25"

   Copy to Clipboard Toggle word wrap
   注意

   这些参数专门用于角色 ComputeOvsDpdk，且不适用于其他角色，包括 同一集群中 可能存在的 Compute 或 ComputeSriov。您可以在全局范围内应用这些参数，但任何全局参数都会被特定于角色的参数覆盖。

2. 使用角色文件以及特定于您的环境的所有环境文件，部署 overcloud。有关详细信息 ，请参阅部署 Overcloud。

1. 在 network-environment.yaml 文件中设置 NeutronGlobalPhysnetMtu 参数。

   parameter_defaults:
     # MTU global configuration
     NeutronGlobalPhysnetMtu: 9000

   Copy to Clipboard Toggle word wrap
   注意

   确保 network-environment.yaml 文件中的 NeutronDpdkSocketMemory 值足够大，以支持巨型帧。详情请查看 第 7.4.2 节 “内存参数”。

2. 将网桥上的 MTU 值设置为 controller.yaml 文件中的 Compute 节点。

     -
       type: ovs_bridge
       name: br-link0
       use_dhcp: false
       members:
         -
           type: interface
           name: nic3
           mtu: 9000

   Copy to Clipboard Toggle word wrap

3. 在 compute.yaml 文件中为 OVS-DPDK 绑定设置 MTU 值：

   - type: ovs_user_bridge
     name: br-link0
     use_dhcp: false
     members:
       - type: ovs_dpdk_bond
         name: dpdkbond0
         mtu: 9000
         rx_queue: 2
         members:
           - type: ovs_dpdk_port
             name: dpdk0
             mtu: 9000
             members:
               - type: interface
                 name: nic4
           - type: ovs_dpdk_port
             name: dpdk1
             mtu: 9000
             members:
               - type: interface
                 name: nic5

   Copy to Clipboard Toggle word wrap

1. 确保 DPDK 计算角色的参数在 network-environment.yaml 中填充。如果需要，它们可以从 派生的 OVS-DPDK 参数复制：

    # DPDK compute node.
     ComputeOvsDpdkParameters:
       KernelArgs: default_hugepagesz=1GB hugepagesz=1G hugepages=32 iommu=pt intel_iommu=on isolcpus=1-7,17-23,9-15,25-31
       TunedProfileName: "cpu-partitioning"
       IsolCpusList: "1-7,17-23,9-15,25-31"
       NovaVcpuPinSet: ['2-7,18-23,10-15,26-31']
       NovaReservedHostMemory: 4096
       OvsDpdkSocketMemory: "1024,1024"
       OvsDpdkMemoryChannels: "4"
       OvsDpdkCoreList: "0,16,8,24"
       OvsPmdCoreList: "1,17,9,25"

   Copy to Clipboard Toggle word wrap

2. 使用 openstack overcloud deploy 命令部署 overcloud。

   • 包含角色文件以及特定于您的环境的所有环境文件。

   • 通过将 /usr/share/openstack-tripleo-heat-templates/environments 中的 host-config-and-reboot.yaml 文件从 /usr/share/openstack-tripleo-heat-templates/environments 中包含 host-config-and-reboot.yaml 文件来应用 KernelArgs 和 TunedProfile 参数：

     TEMPLATES_HOME=”/usr/share/openstack-tripleo-heat-templates”
     CUSTOM_TEMPLATES=”/home/stack/templates”
     
     openstack overcloud deploy --templates \
     -r ${CUSTOM_TEMPLATES}/roles_data.yaml \
     -e ${TEMPLATES_HOME}/environments/host-config-and-reboot.yaml \
     -e ${CUSTOM_TEMPLATES}/network-environment.yaml \
     -e ${CUSTOM_TEMPLATES}/controller.yaml
     -e ${CUSTOM_TEMPLATES}/computeovsdpdk.yaml \
     ...

     Copy to Clipboard Toggle word wrap

1. 创建聚合组并为 OVS-DPDK 添加相关主机。定义与定义的类别元数据匹配的元数据，如 dpdk=true。

    # openstack aggregate create dpdk_group
    # openstack aggregate add host dpdk_group [compute-host]
    # openstack aggregate set --property dpdk=true dpdk_group

   Copy to Clipboard Toggle word wrap
   注意

   您应该使用主机聚合将 CPU 固定实例与未固定实例分开。不使用 CPU 固定的实例不会遵循使用 CPU 固定的实例重新提供要求。

2. 创建类别。

   # openstack flavor create <flavor> --ram <MB> --disk <GB> --vcpus <#>

   Copy to Clipboard Toggle word wrap

3. 设置其他类别属性。请注意，定义的元数据 dpdk=true 与 DPDK 聚合中定义的元数据匹配。

   # openstack flavor set <flavor> --property dpdk=true --property hw:cpu_policy=dedicated --property hw:mem_page_size=1GB --property hw:emulator_threads_policy=isolate

   Copy to Clipboard Toggle word wrap

   有关性能改进的仿真程序线程策略的详情，请参阅： 配置 Emulator Threads，以便在 Dedicated 物理 CPU 上运行。

4. 创建网络。

   # openstack network create net1 --provider-physical-network tenant --provider-network-type vlan --provider-segment <VLAN-ID>
   # openstack subnet create subnet1 --network net1 --subnet-range 192.0.2.0/24 --dhcp

   Copy to Clipboard Toggle word wrap

5. 可选：如果您将多队列用于 OVS-DPDK，请在要用于创建实例的镜像上设置 hw_vif_multiqueue_enabled 属性：

   # openstack image set --property hw_vif_multiqueue_enabled=true <image>

   Copy to Clipboard Toggle word wrap

6. 部署实例。

   # openstack server create --flavor <flavor> --image <glance image> --nic net-id=<network ID> <server_name>

   Copy to Clipboard Toggle word wrap

1. 检查网桥配置，并确认网桥是使用 datapath_type=netdev 创建的。

   # ovs-vsctl list bridge br0
   _uuid               : bdce0825-e263-4d15-b256-f01222df96f3
   auto_attach         : []
   controller          : []
   datapath_id         : "00002608cebd154d"
   datapath_type       : netdev
   datapath_version    : "<built-in>"
   external_ids        : {}
   fail_mode           : []
   flood_vlans         : []
   flow_tables         : {}
   ipfix               : []
   mcast_snooping_enable: false
   mirrors             : []
   name                : "br0"
   netflow             : []
   other_config        : {}
   ports               : [52725b91-de7f-41e7-bb49-3b7e50354138]
   protocols           : []
   rstp_enable         : false
   rstp_status         : {}
   sflow               : []
   status              : {}
   stp_enable          : false

   Copy to Clipboard Toggle word wrap

2. 确认 docker 容器 neutron_ovs_agent 配置为自动启动。

   # docker inspect neutron_ovs_agent | grep -A1 RestartPolicy
               "RestartPolicy": {
                   "Name": "always",

   Copy to Clipboard Toggle word wrap

   如果容器启动时遇到问题，您可以查看相关的消息。

   # less /var/log/containers/neutron/openvswitch-agent.log

   Copy to Clipboard Toggle word wrap

3. 确认 ovs-dpdk 的 PMD CPU 掩码已固定到 CPU。如果是 HT，请使用同级 CPU。

   例如，使用 CPU4 ：

   # cat /sys/devices/system/cpu/cpu4/topology/thread_siblings_list
   4,20

   Copy to Clipboard Toggle word wrap

   使用 CPU 4 和 20：

   # ovs-vsctl set Open_vSwitch . other_config:pmd-cpu-mask=0x100010

   Copy to Clipboard Toggle word wrap

   显示其状态：

   # tuna -t ovs-vswitchd -CP
   thread  ctxt_switches pid SCHED_ rtpri affinity voluntary nonvoluntary       cmd
   3161	OTHER 	0    	6	765023      	614	ovs-vswitchd
   3219   OTHER 	0    	6     	1        	0   	handler24
   3220   OTHER 	0    	6     	1        	0   	handler21
   3221   OTHER 	0    	6     	1        	0   	handler22
   3222   OTHER 	0    	6     	1        	0   	handler23
   3223   OTHER 	0    	6     	1        	0   	handler25
   3224   OTHER 	0    	6     	1        	0   	handler26
   3225   OTHER 	0    	6     	1        	0   	handler27
   3226   OTHER 	0    	6     	1        	0   	handler28
   3227   OTHER 	0    	6     	2        	0   	handler31
   3228   OTHER 	0    	6     	2        	4   	handler30
   3229   OTHER 	0    	6     	2        	5   	handler32
   3230   OTHER 	0    	6	953538      	431   revalidator29
   3231   OTHER 	0    	6   1424258      	976   revalidator33
   3232   OTHER 	0    	6   1424693      	836   revalidator34
   3233   OTHER 	0    	6	951678      	503   revalidator36
   3234   OTHER 	0    	6   1425128      	498   revalidator35
   *3235   OTHER 	0    	4	151123       	51       	pmd37*
   *3236   OTHER 	0   	20	298967       	48       	pmd38*
   3164   OTHER 	0    	6 	47575        	0  dpdk_watchdog3
   3165   OTHER 	0    	6	237634        	0   vhost_thread1
   3166   OTHER 	0    	6  	3665        	0       	urcu2

   Copy to Clipboard Toggle word wrap

1. 在 undercloud 上安装 ceph-ansible。

   $ sudo yum install ceph-ansible -y

   Copy to Clipboard Toggle word wrap

2. 为 ComputeHCI 角色生成 roles_data.yaml 文件。

   $ openstack overcloud roles generate -o ~/<templates>/roles_data.yaml Controller \
    ComputeHCIOvsDpdk

   Copy to Clipboard Toggle word wrap
3. 使用 openstack flavor create 和 openstack flavor set 命令创建和配置一个新类别。有关创建类别的更多信息 ，请参阅高级 Overcloud 自定义指南中的创建新角色。

4. 使用您生成的自定义 roles_data.yaml 文件部署 overcloud。

   # time openstack overcloud deploy --templates \
    --timeout 360 \
    -r ~/<templates>/roles_data.yaml \
    -e /usr/share/openstack-tripleo-heat-templates/environments/ceph-ansible/ceph-ansible.yaml \
    -e /usr/share/openstack-tripleo-heat-templates/environments/network-isolation.yaml \
    -e /usr/share/openstack-tripleo-heat-templates/environments/services-docker/neutron-ovs-dpdk.yaml \
    -e /usr/share/openstack-tripleo-heat-templates/environments/host-config-and-reboot.yaml \
    -e ~/<templates>/<custom environment file>

   Copy to Clipboard Toggle word wrap

1. 将 OVS-DPDK 的自定义资源添加到 resource_registry 下：

     resource_registry:
       # Specify the relative/absolute path to the config files you want to use for override the default.
       OS::TripleO::ComputeOvsDpdkSriov::Net::SoftwareConfig:
         nic-configs/computeovsdpdksriov.yaml
       OS::TripleO::Controller::Net::SoftwareConfig:
         nic-configs/controller.yaml

   Copy to Clipboard Toggle word wrap

2. 在 parameter_defaults 下，将隧道类型和网络类型设置为 vxlan。

   NeutronTunnelTypes: 'vxlan'
   NeutronNetworkType: 'vxlan'

   Copy to Clipboard Toggle word wrap

3. 在 parameters_defaults 下，设置网桥映射：

   # The OVS logical->physical bridge mappings to use.
   NeutronBridgeMappings:
     - dpdk-mgmt:br-link0

   Copy to Clipboard Toggle word wrap

4. 在 parameter_defaults 下，为 ComputeOvsDpdkSriov 角色设置特定于角色的参数：

     ##########################
     # OVS DPDK configuration #
     # ########################
     ComputeOvsDpdkSriovParameters:
       KernelArgs: "default_hugepagesz=1GB hugepagesz=1G hugepages=32 iommu=pt intel_iommu=on isolcpus=2-19,22-39"
       TunedProfileName: "cpu-partitioning"
       IsolCpusList: "2-19,22-39"
       NovaVcpuPinSet: ['4-19,24-39']
       NovaReservedHostMemory: 2048
       OvsDpdkSocketMemory: "3072,1024"
       OvsDpdkMemoryChannels: "4"
       OvsDpdkCoreList: "0,20,1,21"
       OvsPmdCoreList: "2,22,3,23"
       NovaLibvirtRxQueueSize: 1024
       NovaLibvirtTxQueueSize: 1024

   Copy to Clipboard Toggle word wrap
   注意

   要防止创建客户机期间失败，请在每个 NUMA 节点上至少分配一个具有同级线程的 CPU。在示例中，OvsPmdCoreList 参数的值代表来自 NUMA 0 的核心 2 和 22，以及来自 NUMA 1 的核心 3 和 23。

   注意

   巨页由虚拟机消耗，以及使用 OvsDpdkSocketMemory 参数的 OVS-DPDK。要计算虚拟机的巨页数量，请从 boot 参数值中减去 OvsDpdkSocketMemory 值。您还必须将 hw:mem_page_size=1GB 添加到与 DPDK 实例关联的类别中。

   注意

   OvsDPDKCoreList 和 OvsDpdkMemoryChannels 是必需的，必须正确设置才能防止失败。

5. 为 SR-IOV 配置特定于角色的参数：

     ##########################
     #  SR-IOV configuration  #
     ##########################
     NeutronMechanismDrivers: ['openvswitch','sriovnicswitch']
     NovaSchedulerDefaultFilters: ['RetryFilter','AvailabilityZoneFilter','RamFilter','ComputeFilter','ComputeCapabilitiesFilter','ImagePropertiesFilter','ServerGroupAntiAffinityFilter','ServerGroupAffinityFilter','PciPassthroughFilter','NUMATopologyFilter']
     NovaSchedulerAvailableFilters: ["nova.scheduler.filters.all_filters","nova.scheduler.filters.pci_passthrough_filter.PciPassthroughFilter"]
     NovaPCIPassthrough:
       - vendor_id: "8086"
         product_id: "1528"
         address: "0000:06:00.0"
         trusted: "true"
         physical_network: "sriov-1"
       - vendor_id: "8086"
         product_id: "1528"
         address: "0000:06:00.1"
         trusted: "true"
         physical_network: "sriov-2"

   Copy to Clipboard Toggle word wrap

1. 为隔离的网络创建 control plane Linux 绑定。

     - type: linux_bond
       name: bond_api
       bonding_options: "mode=active-backup"
       use_dhcp: false
       dns_servers:
         get_param: DnsServers
       members:
       - type: interface
         name: nic2
         primary: true

   Copy to Clipboard Toggle word wrap

2. 将 VLAN 分配给此 Linux 绑定。

     - type: vlan
       vlan_id:
         get_param: InternalApiNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: InternalApiIpSubnet
   
     - type: vlan
       vlan_id:
         get_param: StorageNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: StorageIpSubnet
   
     - type: vlan
       vlan_id:
         get_param: StorageMgmtNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: StorageMgmtIpSubnet
   
     - type: vlan
       vlan_id:
         get_param: ExternalNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: ExternalIpSubnet
       routes:
       - default: true
         next_hop:
           get_param: ExternalInterfaceDefaultRoute

   Copy to Clipboard Toggle word wrap

3. 创建 OVS 网桥，以访问 neutron-dhcp-agent 和 neutron-metadata-agent 服务。

     - type: ovs_bridge
       name: br-link0
       use_dhcp: false
       mtu: 9000
       members:
       - type: interface
         name: nic3
         mtu: 9000
       - type: vlan
         vlan_id:
           get_param: TenantNetworkVlanID
         mtu: 9000
         addresses:
         - ip_netmask:
             get_param: TenantIpSubnet

   Copy to Clipboard Toggle word wrap

1. 为隔离的网络创建 control plane Linux 绑定。

     - type: linux_bond
       name: bond_api
       bonding_options: "mode=active-backup"
       use_dhcp: false
       dns_servers:
         get_param: DnsServers
       members:
       - type: interface
         name: nic3
         primary: true
       - type: interface
         name: nic4

   Copy to Clipboard Toggle word wrap

2. 将 VLAN 分配给此 Linux 绑定。

     - type: vlan
       vlan_id:
         get_param: InternalApiNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: InternalApiIpSubnet
   
     - type: vlan
       vlan_id:
         get_param: StorageNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: StorageIpSubnet

   Copy to Clipboard Toggle word wrap

3. 使用 DPDK 端口设置网桥以链接到控制器。

     - type: ovs_user_bridge
       name: br-link0
       use_dhcp: false
       ovs_extra:
         - str_replace:
             template: set port br-link0 tag=_VLAN_TAG_
             params:
               _VLAN_TAG_:
                  get_param: TenantNetworkVlanID
       addresses:
         - ip_netmask:
             get_param: TenantIpSubnet
       members:
         - type: ovs_dpdk_bond
           name: dpdkbond0
           mtu: 9000
           rx_queue: 2
           members:
             - type: ovs_dpdk_port
               name: dpdk0
               members:
                 - type: interface
                   name: nic7
             - type: ovs_dpdk_port
               name: dpdk1
               members:
                 - type: interface
                   name: nic8

   Copy to Clipboard Toggle word wrap
   注意

   要包含多个 DPDK 设备，请为您要添加的每个 DPDK 设备重复 类型 代码部分。

   注意

   在使用 OVS-DPDK 时，同一计算节点上的 所有 网桥都应是 ovs_user_bridge 类型。director 可以接受配置，但 Red Hat OpenStack Platform 不支持同一节点上的 ovs_bridge 和 ovs_user_bridge。