4.7. MetalLB를 사용한 대칭 라우팅 관리

프로세스

1. VRF 인스턴스를 정의하려면 NodeNetworkConfigurationPolicy CR을 만듭니다.

   1. 다음 예시와 같은 내용을 포함하는 node-network-vrf.yaml 과 같은 파일을 만듭니다.

      apiVersion: nmstate.io/v1
      kind: NodeNetworkConfigurationPolicy
      metadata:
        name: vrfpolicy 

      1

      
      spec:
        nodeSelector:
          vrf: "true" 

      2

      
        maxUnavailable: 3
        desiredState:
          interfaces:
          - name: ens4vrf 

      3

      
            type: vrf 

      4

      
            state: up
            vrf:
              port:
              - ens4 

      5

      
              route-table-id: 2 

      6

      
          - name: ens4 

      7

      
            type: ethernet
            state: up
            ipv4:
              address:
              - ip: 192.168.130.130
                prefix-length: 24
              dhcp: false
              enabled: true
          routes: 

      8

      
            config:
            - destination: 0.0.0.0/0
              metric: 150
              next-hop-address: 192.168.130.1
              next-hop-interface: ens4
              table-id: 2
          route-rules: 

      9

      
            config:
            - ip-to: 172.30.0.0/16
              priority: 998
              route-table: 254 

      10

      
            - ip-to: 10.132.0.0/14
              priority: 998
              route-table: 254
            - ip-to: 169.254.0.0/17
              priority: 998
              route-table: 254

      Copy to Clipboard Toggle word wrap

      1

      정책의 이름입니다.

      2

      이 예제에서는 vrf:true 레이블이 있는 모든 노드에 정책을 적용합니다.

      3

      인터페이스의 이름.

      4

      인터페이스 유형입니다. 이 예제에서는 VRF 인스턴스를 생성합니다.

      5

      VRF가 연결되는 노드 인터페이스입니다.

      6

      VRF에 대한 경로 테이블 ID의 이름입니다.

      7

      VRF와 연관된 인터페이스의 IPv4 주소입니다.

      8

      네트워크 경로에 대한 구성을 정의합니다. 다음 홉 주소 필드는 경로의 다음 홉의 IP 주소를 정의합니다. 다음 홉 인터페이스 필드는 경로에 대한 나가는 인터페이스를 정의합니다. 이 예에서 VRF 라우팅 테이블은 2 이며, 이는 EgressService CR에서 정의한 ID를 참조합니다.

      9

      추가 경로 규칙을 정의합니다. ip-to 필드는 클러스터 네트워크 CIDR, 서비스 네트워크 CIDR 및 내부 마스커레이드 서브넷 CIDR과 일치해야 합니다. 다음 명령을 실행하면 이러한 CIDR 주소 사양에 대한 값을 볼 수 있습니다: oc describe network.operator/cluster .

      10

      Linux 커널이 경로를 계산할 때 사용하는 주요 라우팅 테이블의 ID는 254 입니다.

   2. 다음 명령을 실행하여 정책을 적용합니다.

      $ oc apply -f node-network-vrf.yaml

      Copy to Clipboard Toggle word wrap

2. BGPPeer 사용자 정의 리소스(CR)를 만듭니다.

   1. 다음 예시와 같은 내용을 포함하는 frr-via-vrf.yaml 과 같은 파일을 만듭니다.

      apiVersion: metallb.io/v1beta2
      kind: BGPPeer
      metadata:
        name: frrviavrf
        namespace: metallb-system
      spec:
        myASN: 100
        peerASN: 200
        peerAddress: 192.168.130.1
        vrf: ens4vrf 

      1

      Copy to Clipboard Toggle word wrap

      1

      BGP 피어와 연결할 VRF 인스턴스를 지정합니다. MetalLB는 VRF의 라우팅 정보를 기반으로 서비스를 광고하고 라우팅 결정을 내릴 수 있습니다.

   2. 다음 명령을 실행하여 BGP 피어에 대한 구성을 적용합니다.

      $ oc apply -f frr-via-vrf.yaml

      Copy to Clipboard Toggle word wrap

3. IPAddressPool CR을 생성합니다.

   1. 다음 예시와 같은 내용을 담은 first-pool.yaml 과 같은 파일을 만듭니다.

      apiVersion: metallb.io/v1beta1
      kind: IPAddressPool
      metadata:
        name: first-pool
        namespace: metallb-system
      spec:
        addresses:
        - 192.169.10.0/32

      Copy to Clipboard Toggle word wrap

   2. 다음 명령을 실행하여 IP 주소 풀에 대한 구성을 적용합니다.

      $ oc apply -f first-pool.yaml

      Copy to Clipboard Toggle word wrap

4. BGP광고 CR을 만드세요:

   1. 다음 예시와 같은 내용을 담은 first-adv.yaml 과 같은 파일을 만듭니다.

      apiVersion: metallb.io/v1beta1
      kind: BGPAdvertisement
      metadata:
        name: first-adv
        namespace: metallb-system
      spec:
        ipAddressPools:
          - first-pool
        peers:
          - frrviavrf 

      1

      
        nodeSelectors:
          - matchLabels:
              egress-service.k8s.ovn.org/test-server1: "" 

      2

      Copy to Clipboard Toggle word wrap

      1

      이 예에서 MetalLB는 첫 번째 풀 IP 주소 풀에서 frrviavrf BGP 피어로 IP 주소 범위를 광고합니다.

      2

      이 예에서 EgressService CR은 부하 분산 장치 서비스 IP 주소를 사용하도록 송신 트래픽의 소스 IP 주소를 구성합니다. 따라서 포드에서 발생한 트래픽에 대해 동일한 반환 경로를 사용하도록 반환 트래픽에 대한 로드 밸런서 노드를 지정해야 합니다.

   2. 다음 명령을 실행하여 BGP 광고에 대한 구성을 적용합니다.

      $ oc apply -f first-adv.yaml

      Copy to Clipboard Toggle word wrap

5. EgressService CR을 만듭니다.

   1. 다음 예시와 같은 내용을 포함하는 egress-service.yaml 과 같은 파일을 만듭니다.

      apiVersion: k8s.ovn.org/v1
      kind: EgressService
      metadata:
        name: server1 

      1

      
        namespace: test 

      2

      
      spec:
        sourceIPBy: "LoadBalancerIP" 

      3

      
        nodeSelector:
          matchLabels:
            vrf: "true" 

      4

      
        network: "2" 

      5

      Copy to Clipboard Toggle word wrap

      1

      출구 서비스의 이름을 지정합니다. EgressService 리소스의 이름은 수정하려는 로드 밸런서 서비스의 이름과 일치해야 합니다.

      2

      송신 서비스에 대한 네임스페이스를 지정합니다. EgressService 의 네임스페이스는 수정하려는 로드 밸런서 서비스의 네임스페이스와 일치해야 합니다. 송신 서비스는 네임스페이스 범위입니다.

      3

      이 예제에서는 LoadBalancer 서비스 수신 IP 주소를 송신 트래픽의 소스 IP 주소로 할당합니다.

      4

      sourceIPBy 사양에 대해 LoadBalancer를 지정하는 경우 단일 노드가 LoadBalancer 서비스 트래픽을 처리합니다. 이 예에서 vrf: "true" 라벨이 있는 노드만 서비스 트래픽을 처리할 수 있습니다. 노드를 지정하지 않으면 OVN-Kubernetes는 서비스 트래픽을 처리할 워커 노드를 선택합니다. 노드가 선택되면 OVN-Kubernetes는 다음 형식으로 노드에 레이블을 지정합니다: egress-service.k8s.ovn.org/<svc_namespace>-<svc_name>: "" .

      5

      송신 트래픽에 대한 라우팅 테이블 ID를 지정합니다. 값이 NodeNetworkConfigurationPolicy 리소스에 정의된 route-table-id ID와 일치하는지 확인합니다(예: route-table-id: 2 ).

   2. 다음 명령을 실행하여 송신 서비스에 대한 구성을 적용합니다.

      $ oc apply -f egress-service.yaml

      Copy to Clipboard Toggle word wrap

검증

1. 다음 명령을 실행하여 MetalLB 서비스 뒤에서 실행되는 포드의 애플리케이션 엔드포인트에 액세스할 수 있는지 확인하세요.

   $ curl <external_ip_address>:<port_number> 

   1

   Copy to Clipboard Toggle word wrap

   1

   애플리케이션 엔드포인트에 맞게 외부 IP 주소와 포트 번호를 업데이트합니다.

2. 선택 사항: LoadBalancer 서비스 수신 IP 주소를 송신 트래픽의 소스 IP 주소로 지정한 경우 tcpdump 와 같은 도구를 사용하여 외부 클라이언트에서 수신된 패킷을 분석하여 이 구성을 확인합니다.