네트워크 기능 가상화 계획 및 구성 가이드

절차

1. 기본 리포지토리를 비활성화합니다.

   subscription-manager repos --disable=*

   Copy to Clipboard Toggle word wrap

2. NFV(네트워크 기능 가상화)를 사용하여 Red Hat OpenStack Platform에 필요한 리포지토리를 활성화합니다.

   sudo subscription-manager repos \
   --enable=rhel-7-server-rpms \
   --enable=rhel-7-server-extras-rpms \
   --enable=rhel-7-server-rh-common-rpms \
   --enable=rhel-ha-for-rhel-7-server-rpms \
   --enable=rhel-7-server-openstack-13-rpms \
   --enable=rhel-7-server-nfv-rpms

   Copy to Clipboard Toggle word wrap

1. 기본 제공 ComputeSriov 를 생성하여 NeutronSriovAgent,NeutronSriovHostConfig 및 기본 컴퓨팅 서비스를 실행할 OpenStack 클러스터에서 노드를 정의합니다.

   # openstack overcloud roles generate \
   -o /home/stack/templates/roles_data.yaml \
   Controller ComputeSriov

   Copy to Clipboard Toggle word wrap

2. SR-IOV 컨테이너가 준비되도록 overcloud_images.yaml 을 생성할 때 neutron-sriov.yaml 및 roles_data.yaml 파일을 포함합니다.

   SERVICES=\
   /usr/share/openstack-tripleo-heat-templates/environments/services
   
   openstack overcloud container image prepare \
   --namespace=registry.redhat.io/rhosp13 \
   --push-destination=192.168.24.1:8787 \
   --prefix=openstack- \
   --tag-from-label {version}-{release} \
   -e ${SERVICES}/neutron-sriov.yaml \
   --roles-file /home/stack/templates/roles_data.yaml \
   --output-env-file=/home/stack/templates/overcloud_images.yaml \
   --output-images-file=/home/stack/local_registry_images.yaml

   Copy to Clipboard Toggle word wrap
   참고

   push-destination IP 주소는 이전에 undercloud.conf 구성 파일에서 local_ip 매개변수로 설정한 주소입니다.

   컨테이너 이미지 준비에 대한 자세한 내용은 Director Installation and Usage 를 참조하십시오.

3. KernelAgs 및 TunedProfile 매개변수를 적용하려면 /usr/share/openstack-tripleo-heat-templates/environments 의 host-config-and-reboot.yaml 파일을 배포 스크립트에 포함합니다.

   openstack overcloud deploy --templates \
   … \
   -e /usr/share/openstack-tripleo-heat-templates/environments/host-config-and-reboot.yaml \
   ...

   Copy to Clipboard Toggle word wrap

4. 클러스터의 요구 사항 및 하드웨어 구성에 따라 parameter_defaults 아래에 SR-IOV 노드의 매개변수를 구성합니다. 이러한 설정은 일반적으로 network-environment.yaml 파일에 추가됩니다.

     NeutronNetworkType: 'vlan'
     NeutronNetworkVLANRanges:
       - tenant:22:22
       - tenant:25:25
     NeutronTunnelTypes: ''

   Copy to Clipboard Toggle word wrap

5. 동일한 파일에서 SR-IOV 컴퓨팅 노드에 대한 역할별 매개 변수를 구성합니다.

   참고

   NeutronSriovNumVFs 매개변수는 네트워크 구성 템플릿에서 numvfs 속성 대신 더 이상 사용되지 않습니다. Red Hat은 배포 후 NeutronSriovNumVFs 매개변수 또는 numvfs 매개변수 수정을 지원하지 않습니다. 실행 중인 환경에서 두 매개 변수를 변경할 경우 해당 PF에 SR-IOV 포트가 있는 모든 실행 중인 인스턴스에 대한 영구 중단이 발생하는 것으로 알려져 있습니다. 이러한 인스턴스를 하드 재부팅하지 않으면 SR-IOV PCI 장치가 인스턴스에 표시되지 않습니다.

     ComputeSriovParameters:
       IsolCpusList: "1-19,21-39"
       KernelArgs: "default_hugepagesz=1GB hugepagesz=1G hugepages=32 iommu=pt intel_iommu=on isolcpus=1-19,21-39"
       TunedProfileName: "cpu-partitioning"
       NeutronBridgeMappings:
         - tenant:br-link0
       NeutronPhysicalDevMappings:
         - tenant:p7p1
         - tenant:p7p2
       NeutronSriovNumVFs:
         - p7p1:5
         - p7p2:5
       NovaPCIPassthrough:
         - vendor_id: "8086"
           product_id: "1528"
           address: "0000:06:00.0"
           physical_network: "tenant"
         - vendor_id: "8086"
           product_id: "1528"
           address: "0000:06:00.1"
           physical_network: "tenant"
       NovaVcpuPinSet: '1-19,21-39'
       NovaReservedHostMemory: 4096

   Copy to Clipboard Toggle word wrap
   참고

   NIC의 장치 이름이 변경될 수 있으므로 PCI 패스스루를 구성할 때 devname 매개변수를 사용하지 마십시오. 대신 vendor_id 및 product_id 를 사용하는 것이 더 안정적이기 때문에 또는 NIC 주소를 사용합니다. NovaPCIPassthrough를 구성하는 방법에 대한 자세한 내용은 NovaPCIPassthrough 구성에 대한 지침을 참조하십시오.

6. compute.yaml 네트워크 구성 템플릿에서 SR-IOV 지원 인터페이스를 구성합니다. SR-IOV 가상 기능(VF)을 생성하기 위해 인터페이스가 독립 실행형 NIC로 구성되었는지 확인합니다.

                - type: interface
                   name: p7p3
                   mtu: 9000
                   use_dhcp: false
                   defroute: false
                   nm_controlled: true
                   hotplug: true
   
                 - type: interface
                   name: p7p4
                   mtu: 9000
                   use_dhcp: false
                   defroute: false
                   nm_controlled: true
                   hotplug: true

   Copy to Clipboard Toggle word wrap

7. 기본 필터 목록에 AggregateInstanceExtraSpecsFilter 값이 포함되어 있는지 확인합니다.

   NovaSchedulerDefaultFilters: ['AvailabilityZoneFilter','RamFilter','ComputeFilter','ComputeCapabilitiesFilter','ImagePropertiesFilter','ServerGroupAntiAffinityFilter','ServerGroupAffinityFilter','PciPassthroughFilter','AggregateInstanceExtraSpecsFilter']

   Copy to Clipboard Toggle word wrap
8. 오버클라우드를 배포합니다.

절차

1. ComputeSriov 역할을 생성합니다.

   openstack overcloud roles generate -o roles_data.yaml Controller ComputeSriov

   Copy to Clipboard Toggle word wrap
2. true 값을 사용하여 역할별 매개변수 아래에 OvsHwOffload 매개변수를 추가합니다.
3. iptables/hybrid 방화벽 드라이버 구현을 사용하도록 neutron을 구성하려면 다음 행을 포함합니다. NeutronOVSFirewallDriver: iptables_hybrid. NeutronOVSFirewallDriver 에 대한 자세한 내용은 Advanced Overcloud Customization 가이드의 Open vSwitch 방화벽 사용을 참조하십시오.

4. 환경에 맞게 physical_network 매개변수를 구성합니다.

   • VLAN의 경우 배포 후 neutron에서 생성한 네트워크 이름으로 physical_network 매개변수를 설정합니다. 이 값은 NeutronBridgeMappings 에도 있어야 합니다.

   • VXLAN의 경우 physical_network 매개 변수를 null 로 설정합니다.

     예제:

     parameter_defaults:
       NeutronOVSFirewallDriver: iptables_hybrid
       ComputeSriovParameters:
         IsolCpusList: 2-9,21-29,11-19,31-39
         KernelArgs: "default_hugepagesz=1GB hugepagesz=1G hugepages=128 intel_iommu=on iommu=pt"
         OvsHwOffload: true
         TunedProfileName: "cpu-partitioning"
         NeutronBridgeMappings:
           - tenant:br-tenant
         NovaPCIPassthrough:
           - vendor_id: <vendor-id>
             product_id: <product-id>
             address: <address>
             physical_network: "tenant"
           - vendor_id: <vendor-id>
             product_id: <product-id>
             address: <address>
             physical_network: "null"
         NovaReservedHostMemory: 4096
         NovaComputeCpuDedicatedSet: 1-9,21-29,11-19,31-39

     Copy to Clipboard Toggle word wrap
   • <vendor-id> 를 물리적 NIC의 벤더 ID로 바꿉니다.
   • <product-id> 를 NIC VF의 제품 ID로 바꿉니다.

   • <address> 를 물리적 NIC의 주소로 바꿉니다.

     NovaPCIPassthrough를 구성하는 방법에 대한 자세한 내용은 NovaPCIPassthrough 구성에 대한 지침을 참조하십시오.

5. 기본 필터 목록에 NUMATopologyFilter 가 포함되어 있는지 확인합니다.

     NovaSchedulerDefaultFilters: [\'RetryFilter',\'AvailabilityZoneFilter',\'ComputeFilter',\'ComputeCapabilitiesFilter',\'ImagePropertiesFilter',\'ServerGroupAntiAffinityFilter',\'ServerGroupAffinityFilter',\'PciPassthroughFilter',\'NUMATopologyFilter']

   Copy to Clipboard Toggle word wrap

6. compute-sriov.yaml 구성 파일에서 하드웨어 오프로드를 위한 하나 이상의 네트워크 인터페이스를 구성합니다.

     - type: ovs_bridge
       name: br-tenant
       mtu: 9000
       members:
       - type: sriov_pf
         name: p7p1
         numvfs: 5
         mtu: 9000
         primary: true
         promisc: true
         use_dhcp: false
         link_mode: switchdev

   Copy to Clipboard Toggle word wrap
   참고
   • Open vSwitch 하드웨어 오프로드를 구성할 때 NeutronSriovNumVFs 매개변수를 사용하지 마십시오. 가상 함수 수는 os-net-config 에서 사용하는 네트워크 구성 파일에서 numvfs 매개 변수를 사용하여 지정됩니다. Red Hat은 업데이트 또는 재배포 중에 numvfs 설정 수정을 지원하지 않습니다.
   • 드라이버 제한으로 인해 VXLAN과 같은 터널 끝점이 트래픽을 전달하지 않으므로 Mellanox 네트워크 인터페이스를 nic-config 인터페이스 유형 ovs-vlan 으로 구성하지 마십시오.

7. overcloud deploy 명령에 ovs-hw-offload.yaml 파일을 포함합니다.

   TEMPLATES_HOME=”/usr/share/openstack-tripleo-heat-templates”
   CUSTOM_TEMPLATES=”/home/stack/templates”
   
   openstack overcloud deploy --templates \
     -r ${CUSTOM_TEMPLATES}/roles_data.yaml \
     -e ${TEMPLATES_HOME}/environments/ovs-hw-offload.yaml \
     -e ${CUSTOM_TEMPLATES}/network-environment.yaml \
     -e ${CUSTOM_TEMPLATES}/neutron-ovs.yaml

   Copy to Clipboard Toggle word wrap

1. 플레이버를 만듭니다.

   # openstack flavor create <flavor> --ram <MB> --disk <GB> --vcpus <#>

   Copy to Clipboard Toggle word wrap

2. 네트워크를 만듭니다.

   # openstack network create net1 --provider-physical-network tenant --provider-network-type vlan --provider-segment <VLAN-ID>
   # openstack subnet create subnet1 --network net1 --subnet-range 192.0.2.0/24 --dhcp

   Copy to Clipboard Toggle word wrap

3. 포트를 만듭니다.

   • vnic-type direct 를 사용하여 SR-IOV VF(가상 기능) 포트를 생성합니다.

     # openstack port create --network net1 --vnic-type direct sriov_port

     Copy to Clipboard Toggle word wrap

   • 다음을 사용하여 하드웨어 오프로드가 있는 가상 기능을 생성합니다.

     # openstack port create --network net1 --vnic-type direct --binding-profile '{"capabilities": ["switchdev"]} sriov_hwoffload_port

     Copy to Clipboard Toggle word wrap

   • vnic-type direct-physical 을 사용하여 SR-IOV PF 포트를 생성합니다.

     # openstack port create --network net1 --vnic-type direct-physical sriov_port

     Copy to Clipboard Toggle word wrap

4. 인스턴스 배포

   # openstack server create --flavor <flavor> --image <image> --nic port-id=<id> <instance name>

   Copy to Clipboard Toggle word wrap

1. 배포 전에 nova.conf 구성 파일의 parameter_defaults 아래에 있는 heat 매개변수 NovaSchedulerDefaultFilters 를 통해 AggregateInstanceExtraSpecsFilter 값 및 기타 필요한 필터를 구성할 수 있습니다.

     parameter_defaults:
       NovaSchedulerDefaultFilters: ['AggregateInstanceExtraSpecsFilter', 'RetryFilter','AvailabilityZoneFilter','RamFilter','ComputeFilter','ComputeCapabilitiesFilter','ImagePropertiesFilter','ServerGroupAntiAffinityFilter','ServerGroupAffinityFilter','PciPassthroughFilter','NUMATopologyFilter']

   Copy to Clipboard Toggle word wrap
   참고

   AggregateInstanceExtraSpecsFilter 구성을 종료 클러스터에 추가하려면 이 매개변수를 heat 템플릿에 추가하고 원래 배포 스크립트를 다시 실행할 수 있습니다.

2. SR-IOV(단일 루트 I/O 가상화)에 대한 집계 그룹을 생성하고 관련 호스트를 추가합니다. 메타데이터를 정의합니다(예: 정의된 플레이버 메타데이터와 일치하는 sriov=true ).

   # openstack aggregate create sriov_group
   # openstack aggregate add host sriov_group compute-sriov-0.localdomain
   # openstack aggregate set --property sriov=true sriov_group

   Copy to Clipboard Toggle word wrap

3. 플레이버를 만듭니다.

   # openstack flavor create <flavor> --ram <MB> --disk <GB> --vcpus <#>

   Copy to Clipboard Toggle word wrap

4. 추가 플레이버 속성을 설정합니다. 정의된 metadata sriov=true 는 SR-IOV 집계의 정의된 메타데이터와 일치합니다.

   openstack flavor set --property sriov=true --property hw:cpu_policy=dedicated --property hw:mem_page_size=1GB <flavor>

   Copy to Clipboard Toggle word wrap

1. /usr/share/openstack-tripleo-heat-templates/plan-environment-derived-params.yaml 파일을 로컬 디렉터리에 복사하고 사용자 환경에 맞게 입력 매개변수를 설정합니다.

     workflow_parameters:
       tripleo.derive_params.v1.derive_parameters:
         EmptyEmpty# DPDK Parameters Empty#
         # Specifices the minimum number of CPU physical cores to be allocated for DPDK
         # PMD threads. The actual allocation will be based on network config, if
         # the a DPDK port is associated with a numa node, then this configuration
         # will be used, else 1.
         num_phy_cores_per_numa_node_for_pmd: 1
         # Amount of memory to be configured as huge pages in percentage. Ouf the
         # total available memory (excluding the NovaReservedHostMemory), the
         # specified percentage of the remaining is configured as huge pages.
         huge_page_allocation_percentage: 50

   Copy to Clipboard Toggle word wrap

2. openstack overcloud deploy 명령을 실행하고 다음을 포함합니다.

   • update-plan-only 옵션
   • 역할 파일 및 해당 환경과 관련된 모든 환경 파일

   • --plan-environment-file 선택적 인수가 있는 plan-environment-derived-parms.yaml 파일

     $ openstack overcloud deploy --templates --update-plan-only \
     -r /home/stack/roles_data.yaml \
     -e /home/stack/<environment-file> \
     ... #repeat as necessary ...
     -p /home/stack/plan-environment-derived-params.yaml

     Copy to Clipboard Toggle word wrap

1. plan-environment.yaml 에서 network-environment.yaml 파일에 파생된 매개변수를 복사합니다.

     # DPDK compute node.
     ComputeOvsDpdkParameters:
       KernelArgs: default_hugepagesz=1GB hugepagesz=1G hugepages=32 iommu=pt intel_iommu=on isolcpus=1-7,17-23,9-15,25-31
       TunedProfileName: "cpu-partitioning"
       IsolCpusList: "1-7,17-23,9-15,25-31"
       NovaVcpuPinSet: ['2-7,18-23,10-15,26-31']
       NovaReservedHostMemory: 4096
       OvsDpdkSocketMemory: "1024,1024"
       OvsDpdkMemoryChannels: "4"
       OvsDpdkCoreList: "0,16,8,24"
       OvsPmdCoreList: "1,17,9,25"

   Copy to Clipboard Toggle word wrap
   참고

   이러한 매개변수는 ComputeOvsDpdk 역할에만 적용되며 동일한 클러스터에 존재할 수 있는 Compute 또는 ComputeSriov 를 비롯한 다른 역할에는 적용되지 않습니다. 이러한 매개변수를 전역적으로 적용할 수 있지만 전역 매개변수는 역할별 매개변수를 통해 덮어씁니다.

2. 역할 파일 및 해당 환경과 관련된 모든 환경 파일을 사용하여 오버클라우드를 배포합니다. 자세한 내용은 Overcloud 배포를 참조하십시오.

1. network-environment.yaml 파일에서 NeutronGlobalPhysnetMtu 매개변수를 설정합니다.

   parameter_defaults:
     # MTU global configuration
     NeutronGlobalPhysnetMtu: 9000

   Copy to Clipboard Toggle word wrap
   참고

   network-environment.yaml 파일의 NeutronDpdkSocketMemory 값이 점보 프레임을 지원하기에 충분히 큰지 확인합니다. 자세한 내용은 7.4.2절. “메모리 매개변수” 을 참조하십시오.

2. 브리지의 MTU 값을 controller.yaml 파일의 Compute 노드로 설정합니다.

     -
       type: ovs_bridge
       name: br-link0
       use_dhcp: false
       members:
         -
           type: interface
           name: nic3
           mtu: 9000

   Copy to Clipboard Toggle word wrap

3. compute.yaml 파일에서 OVS-DPDK 본딩의 MTU 값을 설정합니다.

   - type: ovs_user_bridge
     name: br-link0
     use_dhcp: false
     members:
       - type: ovs_dpdk_bond
         name: dpdkbond0
         mtu: 9000
         rx_queue: 2
         members:
           - type: ovs_dpdk_port
             name: dpdk0
             mtu: 9000
             members:
               - type: interface
                 name: nic4
           - type: ovs_dpdk_port
             name: dpdk1
             mtu: 9000
             members:
               - type: interface
                 name: nic5

   Copy to Clipboard Toggle word wrap

1. DPDK 컴퓨팅 역할의 매개변수가 network-environment.yaml 에 채워져 있는지 확인합니다. 필요한 경우 파생 OVS-DPDK 매개변수에서 복사할 수 있습니다.

    # DPDK compute node.
     ComputeOvsDpdkParameters:
       KernelArgs: default_hugepagesz=1GB hugepagesz=1G hugepages=32 iommu=pt intel_iommu=on isolcpus=1-7,17-23,9-15,25-31
       TunedProfileName: "cpu-partitioning"
       IsolCpusList: "1-7,17-23,9-15,25-31"
       NovaVcpuPinSet: ['2-7,18-23,10-15,26-31']
       NovaReservedHostMemory: 4096
       OvsDpdkSocketMemory: "1024,1024"
       OvsDpdkMemoryChannels: "4"
       OvsDpdkCoreList: "0,16,8,24"
       OvsPmdCoreList: "1,17,9,25"

   Copy to Clipboard Toggle word wrap

2. openstack overcloud deploy 명령을 사용하여 오버클라우드를 배포합니다.

   • 역할 파일 및 해당 환경과 관련된 모든 환경 파일을 포함합니다.

   • /usr/share/openstack-tripleo-heat-templates/environments 의 host-config-and-reboot.yaml 파일을 배포 스크립트에 포함하여 KernelArgs 및 TunedProfile 매개변수를 적용합니다.

     TEMPLATES_HOME=”/usr/share/openstack-tripleo-heat-templates”
     CUSTOM_TEMPLATES=”/home/stack/templates”
     
     openstack overcloud deploy --templates \
     -r ${CUSTOM_TEMPLATES}/roles_data.yaml \
     -e ${TEMPLATES_HOME}/environments/host-config-and-reboot.yaml \
     -e ${CUSTOM_TEMPLATES}/network-environment.yaml \
     -e ${CUSTOM_TEMPLATES}/controller.yaml
     -e ${CUSTOM_TEMPLATES}/computeovsdpdk.yaml \
     ...

     Copy to Clipboard Toggle word wrap

1. 집계 그룹을 생성하고 OVS-DPDK에 관련 호스트를 추가합니다. 정의된 플레이버 메타데이터와 일치하는 메타데이터(예: dpdk=true )를 정의합니다.

    # openstack aggregate create dpdk_group
    # openstack aggregate add host dpdk_group [compute-host]
    # openstack aggregate set --property dpdk=true dpdk_group

   Copy to Clipboard Toggle word wrap
   참고

   호스트 집계를 사용하여 고정 해제된 인스턴스와 CPU 고정 인스턴스를 분리해야 합니다. CPU 고정을 사용하지 않는 인스턴스는 CPU 고정을 사용하는 인스턴스의 반복 요구 사항을 준수하지 않습니다.

2. 플레이버를 만듭니다.

   # openstack flavor create <flavor> --ram <MB> --disk <GB> --vcpus <#>

   Copy to Clipboard Toggle word wrap

3. 추가 플레이버 속성을 설정합니다. 정의된 metadata dpdk=true 는 DPDK 집계의 정의된 메타데이터와 일치합니다.

   # openstack flavor set <flavor> --property dpdk=true --property hw:cpu_policy=dedicated --property hw:mem_page_size=1GB --property hw:emulator_threads_policy=isolate

   Copy to Clipboard Toggle word wrap

   성능 향상을 위한 에뮬레이터 스레드 정책에 대한 자세한 내용은 다음을 참조하십시오. 전용 물리적 CPU에서 실행되도록 read Threads를 구성합니다.

4. 네트워크를 만듭니다.

   # openstack network create net1 --provider-physical-network tenant --provider-network-type vlan --provider-segment <VLAN-ID>
   # openstack subnet create subnet1 --network net1 --subnet-range 192.0.2.0/24 --dhcp

   Copy to Clipboard Toggle word wrap

5. 선택 사항: OVS-DPDK와 함께 multiqueue를 사용하는 경우 인스턴스를 만드는 데 사용할 이미지의 hw_vif_multiqueue_enabled 속성을 설정합니다.

   # openstack image set --property hw_vif_multiqueue_enabled=true <image>

   Copy to Clipboard Toggle word wrap

6. 인스턴스를 배포합니다.

   # openstack server create --flavor <flavor> --image <glance image> --nic net-id=<network ID> <server_name>

   Copy to Clipboard Toggle word wrap

1. 브리지 구성을 검토하고 datapath_type=netdev 를 사용하여 브리지가 생성되었는지 확인합니다.

   # ovs-vsctl list bridge br0
   _uuid               : bdce0825-e263-4d15-b256-f01222df96f3
   auto_attach         : []
   controller          : []
   datapath_id         : "00002608cebd154d"
   datapath_type       : netdev
   datapath_version    : "<built-in>"
   external_ids        : {}
   fail_mode           : []
   flood_vlans         : []
   flow_tables         : {}
   ipfix               : []
   mcast_snooping_enable: false
   mirrors             : []
   name                : "br0"
   netflow             : []
   other_config        : {}
   ports               : [52725b91-de7f-41e7-bb49-3b7e50354138]
   protocols           : []
   rstp_enable         : false
   rstp_status         : {}
   sflow               : []
   status              : {}
   stp_enable          : false

   Copy to Clipboard Toggle word wrap

2. docker 컨테이너 neutron_ovs_agent 가 자동으로 시작되도록 구성되어 있는지 확인합니다.

   # docker inspect neutron_ovs_agent | grep -A1 RestartPolicy
               "RestartPolicy": {
                   "Name": "always",

   Copy to Clipboard Toggle word wrap

   컨테이너 시작에 문제가 있는 경우 관련 메시지를 볼 수 있습니다.

   # less /var/log/containers/neutron/openvswitch-agent.log

   Copy to Clipboard Toggle word wrap

3. ovs-dpdk 의 PMD CPU 마스크가 CPU에 고정되었는지 확인합니다. HT의 경우 형제 CPU를 사용합니다.

   예를 들어, CPU4 를 사용하십시오.

   # cat /sys/devices/system/cpu/cpu4/topology/thread_siblings_list
   4,20

   Copy to Clipboard Toggle word wrap

   CPU 4 및 20을 사용합니다.

   # ovs-vsctl set Open_vSwitch . other_config:pmd-cpu-mask=0x100010

   Copy to Clipboard Toggle word wrap

   상태를 표시합니다.

   # tuna -t ovs-vswitchd -CP
   thread  ctxt_switches pid SCHED_ rtpri affinity voluntary nonvoluntary       cmd
   3161	OTHER 	0    	6	765023      	614	ovs-vswitchd
   3219   OTHER 	0    	6     	1        	0   	handler24
   3220   OTHER 	0    	6     	1        	0   	handler21
   3221   OTHER 	0    	6     	1        	0   	handler22
   3222   OTHER 	0    	6     	1        	0   	handler23
   3223   OTHER 	0    	6     	1        	0   	handler25
   3224   OTHER 	0    	6     	1        	0   	handler26
   3225   OTHER 	0    	6     	1        	0   	handler27
   3226   OTHER 	0    	6     	1        	0   	handler28
   3227   OTHER 	0    	6     	2        	0   	handler31
   3228   OTHER 	0    	6     	2        	4   	handler30
   3229   OTHER 	0    	6     	2        	5   	handler32
   3230   OTHER 	0    	6	953538      	431   revalidator29
   3231   OTHER 	0    	6   1424258      	976   revalidator33
   3232   OTHER 	0    	6   1424693      	836   revalidator34
   3233   OTHER 	0    	6	951678      	503   revalidator36
   3234   OTHER 	0    	6   1425128      	498   revalidator35
   *3235   OTHER 	0    	4	151123       	51       	pmd37*
   *3236   OTHER 	0   	20	298967       	48       	pmd38*
   3164   OTHER 	0    	6 	47575        	0  dpdk_watchdog3
   3165   OTHER 	0    	6	237634        	0   vhost_thread1
   3166   OTHER 	0    	6  	3665        	0       	urcu2

   Copy to Clipboard Toggle word wrap

1. 언더클라우드에 ceph- anible을 설치합니다.

   $ sudo yum install ceph-ansible -y

   Copy to Clipboard Toggle word wrap

2. ComputeHCI 역할에 대한 roles_data.yaml 파일을 생성합니다.

   $ openstack overcloud roles generate -o ~/<templates>/roles_data.yaml Controller \
    ComputeHCIOvsDpdk

   Copy to Clipboard Toggle word wrap
3. openstack flavor create 및 openstack flavor set 명령을 사용하여 새 플레이버를 생성하고 구성합니다. 플레이버 생성에 대한 자세한 내용은 Advanced Overcloud Customization 가이드 의 새 역할 생성 을 참조하십시오.

4. 생성한 사용자 지정 roles_data.yaml 파일을 사용하여 오버클라우드를 배포합니다.

   # time openstack overcloud deploy --templates \
    --timeout 360 \
    -r ~/<templates>/roles_data.yaml \
    -e /usr/share/openstack-tripleo-heat-templates/environments/ceph-ansible/ceph-ansible.yaml \
    -e /usr/share/openstack-tripleo-heat-templates/environments/network-isolation.yaml \
    -e /usr/share/openstack-tripleo-heat-templates/environments/services-docker/neutron-ovs-dpdk.yaml \
    -e /usr/share/openstack-tripleo-heat-templates/environments/host-config-and-reboot.yaml \
    -e ~/<templates>/<custom environment file>

   Copy to Clipboard Toggle word wrap

1. resource_registry: 아래 OVS-DPDK에 대한 사용자 정의 리소스를 추가합니다.

     resource_registry:
       # Specify the relative/absolute path to the config files you want to use for override the default.
       OS::TripleO::ComputeOvsDpdkSriov::Net::SoftwareConfig:
         nic-configs/computeovsdpdksriov.yaml
       OS::TripleO::Controller::Net::SoftwareConfig:
         nic-configs/controller.yaml

   Copy to Clipboard Toggle word wrap

2. parameter_defaults 에서 터널 유형 및 네트워크 유형을 6443 으로 설정합니다.

   NeutronTunnelTypes: 'vxlan'
   NeutronNetworkType: 'vxlan'

   Copy to Clipboard Toggle word wrap

3. parameters_defaults 에서 브리지 매핑을 설정합니다.

   # The OVS logical->physical bridge mappings to use.
   NeutronBridgeMappings:
     - dpdk-mgmt:br-link0

   Copy to Clipboard Toggle word wrap

4. parameter_defaults 에서 ComputeOvsDpdkSriov 역할에 대한 역할별 매개변수를 설정합니다.

     ##########################
     # OVS DPDK configuration #
     # ########################
     ComputeOvsDpdkSriovParameters:
       KernelArgs: "default_hugepagesz=1GB hugepagesz=1G hugepages=32 iommu=pt intel_iommu=on isolcpus=2-19,22-39"
       TunedProfileName: "cpu-partitioning"
       IsolCpusList: "2-19,22-39"
       NovaVcpuPinSet: ['4-19,24-39']
       NovaReservedHostMemory: 2048
       OvsDpdkSocketMemory: "3072,1024"
       OvsDpdkMemoryChannels: "4"
       OvsDpdkCoreList: "0,20,1,21"
       OvsPmdCoreList: "2,22,3,23"
       NovaLibvirtRxQueueSize: 1024
       NovaLibvirtTxQueueSize: 1024

   Copy to Clipboard Toggle word wrap
   참고

   게스트를 생성하는 동안 오류가 발생하지 않도록 하려면 각 NUMA 노드에서 형제 스레드로 하나 이상의 CPU를 할당합니다. 이 예에서 OvsPmdCoreList 매개변수 값은 NUMA 0에서 코어 2와 22를 나타내며 NUMA 1의 코어 3 및 23을 나타냅니다.

   참고

   가상 머신과 OvsDpdkSocketMemory 매개변수를 사용하는 OVS-DPDK에서 대규모 페이지를 사용합니다. 가상 머신에서 사용할 수 있는 대규모 페이지 수를 계산하려면 부팅 매개변수 값에서 OvsDpdkSocketMemory 값을 끕니다. DPDK 인스턴스와 연결된 플레이버에 hw:mem_page_size=1GB 도 추가해야 합니다.

   참고

   OvsDPDKCoreList 및 OvsDpdkMemoryChannels 는 이 프로세스에 대한 설정이 필요하며 실패를 방지하려면 올바르게 설정해야 합니다.

5. SR-IOV의 역할별 매개변수를 구성합니다.

     ##########################
     #  SR-IOV configuration  #
     ##########################
     NeutronMechanismDrivers: ['openvswitch','sriovnicswitch']
     NovaSchedulerDefaultFilters: ['RetryFilter','AvailabilityZoneFilter','RamFilter','ComputeFilter','ComputeCapabilitiesFilter','ImagePropertiesFilter','ServerGroupAntiAffinityFilter','ServerGroupAffinityFilter','PciPassthroughFilter','NUMATopologyFilter']
     NovaSchedulerAvailableFilters: ["nova.scheduler.filters.all_filters","nova.scheduler.filters.pci_passthrough_filter.PciPassthroughFilter"]
     NovaPCIPassthrough:
       - vendor_id: "8086"
         product_id: "1528"
         address: "0000:06:00.0"
         trusted: "true"
         physical_network: "sriov-1"
       - vendor_id: "8086"
         product_id: "1528"
         address: "0000:06:00.1"
         trusted: "true"
         physical_network: "sriov-2"

   Copy to Clipboard Toggle word wrap

1. 격리된 네트워크에 대한 컨트롤 플레인 Linux 본딩을 생성합니다.

     - type: linux_bond
       name: bond_api
       bonding_options: "mode=active-backup"
       use_dhcp: false
       dns_servers:
         get_param: DnsServers
       members:
       - type: interface
         name: nic2
         primary: true

   Copy to Clipboard Toggle word wrap

2. 이 Linux 본딩에 VLAN을 할당합니다.

     - type: vlan
       vlan_id:
         get_param: InternalApiNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: InternalApiIpSubnet
   
     - type: vlan
       vlan_id:
         get_param: StorageNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: StorageIpSubnet
   
     - type: vlan
       vlan_id:
         get_param: StorageMgmtNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: StorageMgmtIpSubnet
   
     - type: vlan
       vlan_id:
         get_param: ExternalNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: ExternalIpSubnet
       routes:
       - default: true
         next_hop:
           get_param: ExternalInterfaceDefaultRoute

   Copy to Clipboard Toggle word wrap

3. neutron-dhcp-agent 및 neutron-metadata-agent 서비스에 액세스할 OVS 브리지를 만듭니다.

     - type: ovs_bridge
       name: br-link0
       use_dhcp: false
       mtu: 9000
       members:
       - type: interface
         name: nic3
         mtu: 9000
       - type: vlan
         vlan_id:
           get_param: TenantNetworkVlanID
         mtu: 9000
         addresses:
         - ip_netmask:
             get_param: TenantIpSubnet

   Copy to Clipboard Toggle word wrap

1. 격리된 네트워크에 대한 컨트롤 플레인 Linux 본딩을 생성합니다.

     - type: linux_bond
       name: bond_api
       bonding_options: "mode=active-backup"
       use_dhcp: false
       dns_servers:
         get_param: DnsServers
       members:
       - type: interface
         name: nic3
         primary: true
       - type: interface
         name: nic4

   Copy to Clipboard Toggle word wrap

2. 이 Linux 본딩에 VLAN을 할당합니다.

     - type: vlan
       vlan_id:
         get_param: InternalApiNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: InternalApiIpSubnet
   
     - type: vlan
       vlan_id:
         get_param: StorageNetworkVlanID
       device: bond_api
       addresses:
       - ip_netmask:
           get_param: StorageIpSubnet

   Copy to Clipboard Toggle word wrap

3. 컨트롤러에 연결할 DPDK 포트가 있는 브릿지를 설정합니다.

     - type: ovs_user_bridge
       name: br-link0
       use_dhcp: false
       ovs_extra:
         - str_replace:
             template: set port br-link0 tag=_VLAN_TAG_
             params:
               _VLAN_TAG_:
                  get_param: TenantNetworkVlanID
       addresses:
         - ip_netmask:
             get_param: TenantIpSubnet
       members:
         - type: ovs_dpdk_bond
           name: dpdkbond0
           mtu: 9000
           rx_queue: 2
           members:
             - type: ovs_dpdk_port
               name: dpdk0
               members:
                 - type: interface
                   name: nic7
             - type: ovs_dpdk_port
               name: dpdk1
               members:
                 - type: interface
                   name: nic8

   Copy to Clipboard Toggle word wrap
   참고

   여러 DPDK 장치를 포함하려면 추가하려는 각 DPDK 장치에 대해 유형 코드 섹션을 반복합니다.

   참고

   OVS-DPDK를 사용하는 경우 동일한 Compute 노드의 모든 브리지는 ovs_user_bridge 유형이어야 합니다. director는 구성을 허용할 수 있지만 Red Hat OpenStack Platform은 동일한 노드에서 ovs_bridge 및 ovs_user_bridge 혼합을 지원하지 않습니다.