6장. BGP 라우팅


6.1. BGP 라우팅 정보

OpenShift Container Platform에서 BGP를 MetalLB 및 FRR-K8s와 통합하기 위해 FRR-K8s 리소스가 클러스터 라우팅을 모델링하는 방법을 검토할 수 있습니다. 관리자가 MetalLB Operator 외부에서 생성한 경우 FRRConfiguration 사용자 정의 리소스를 metallb-system 에서 openshift-frr-k8s 로 마이그레이션합니다.

중요

MetalLB Operator를 사용하고 MetalLB Operator 이외의 클러스터 관리자 또는 타사 클러스터 구성 요소에서 생성한 metallb-system 네임스페이스에 기존 FRRConfiguration CR이 있는 경우 해당 CR이 openshift-frr-k8s 네임스페이스에 복사되거나 해당 타사 클러스터 구성 요소가 새 네임스페이스를 사용하는지 확인해야 합니다. 자세한 내용은 "FRR-K8s 리소스 마이그레이션"을 참조하십시오.

6.1.1. BGP(Border Gateway Protocol) 라우팅 정보

클러스터의 외부 라우팅을 활성화하려면 FRRouting(FRR) 및 FRR-K8s 데몬을 사용하여 BGP(Border Gateway Protocol)를 구성합니다. FRRConfiguration CR(사용자 정의 리소스)을 사용하여 라우팅 동작을 정의하고 필요한 네임스페이스 및 마이그레이션 방법을 사용하여 MetalLB Operator와의 호환성을 보장할 수 있습니다.

OpenShift Container Platform은 Linux, UNIX 및 유사한 운영 체제용 무료 오픈 소스 인터넷 라우팅 프로토콜 제품군인 FRR을 통한 BGP 라우팅을 지원합니다. FR-K8s는 Kubernetes 호환 방식으로 FRR API의 하위 집합을 표시하는 Kubernetes 기반 데몬 세트입니다. 클러스터 관리자는 FRRConfiguration 사용자 지정 리소스를 사용하여 FRR 서비스에 액세스할 수 있습니다.

다음 다이어그램에서는 OpenShift Container Platform 노드에 두 개의 네임스페이스가 있는 멀티 테넌시 환경을 보여줍니다. OVN-Kubernetes 게이트웨이 라우터가 네임스페이스에서 외부 소스로 트래픽을 보내면 트래픽이 기본 가상 라우팅 및 전달(VRF) 인스턴스를 통해 전달됩니다. BGP 광고는 FRR 또는 OVN-Kubernetes 라우터가 클라우드 공급자의 라우터로 BGP 세션을 설정할 때 발생합니다. 이 세션을 통해 클라우드 공급자의 라우터는 노드가 Pod 또는 서비스 네트워크에 도달하기 위한 다음 홉 IP 주소임을 알 수 있습니다.

그림 6.1. VPN이 없는 BGP 광고

VPN이 없는 BGP 광고의 이미지

다음 다이어그램에서는 VRF lite를 사용하는 여러 VRF BGP 인스턴스를 보여줍니다. 이 아키텍처는 로컬 게이트웨이 모드만 지원합니다. VRF lite는 UDNs를 사용하여 MPLS(Multi-Protocol Label Switching) 또는 Ethernet Virtual Private Network(E VPN) 프로토콜의 과도한 캡슐화를 발생시키지 않고 Pod 트래픽을 격리하여 네트워크 가상화를 제공합니다. 별도의 L3 링크가 특정 VRF에 매핑되므로 독립적인 BGP 피어링 세션은 트래픽을 다음 홉 라우터로 라우팅합니다. 또한 이 L3 메커니즘을 다중 클라우드 배포에 배포하여 특정 네임스페이스가 네트워크를 통해 존재할 수 있도록 할 수 있습니다.

그림 6.2. VRF lite를 사용하는 여러 VRF BGP 인스턴스

VRF lite를 사용하는 여러 VRF BGP 인스턴스의 이미지

6.1.1.1. 지원되는 플랫폼

BGP 라우팅은 다음 인프라 유형에서 지원됩니다.

  • 베어 메탈

BGP 라우팅을 사용하려면 네트워크 공급자에 대해 BGP를 올바르게 구성해야 합니다. 네트워크 공급자의 중단 또는 잘못된 구성으로 인해 클러스터 네트워크가 중단될 수 있습니다.

6.1.1.2. MetalLB Operator와 함께 사용할 고려 사항

MetalLB Operator는 클러스터에 대한 애드온으로 설치됩니다. MetalLB Operator를 배포하면 추가 라우팅 기능 공급자로 FRR-K8s를 자동으로 활성화하고 이 기능에 의해 설치된 FRR-K8s 데몬을 사용합니다.

4.18로 업그레이드하기 전에 MetalLB Operator(클러스터 관리자 또는 기타 구성 요소에 의해 추가됨)에서 관리하지 않는 metallb-system 네임스페이스의 기존 FRRConfiguration 을 openshift-frr-k8s 네임스페이스에 수동으로 복사하여 필요한 경우 네임스페이스를 생성해야 합니다.

중요

MetalLB Operator를 사용하고 클러스터 관리자 또는 MetalLB Operator 이외의 타사 클러스터 구성 요소가 생성된 metallb-system 네임스페이스에 기존 FRRConfiguration CR이 있는 경우 다음을 수행해야 합니다.

  • 이러한 기존 FRRConfiguration CR이 openshift-frr-k8s 네임스페이스에 복사되었는지 확인합니다.
  • 타사 클러스터 구성 요소가 생성한 FRRConfiguration CR에 새 네임스페이스를 사용하는지 확인합니다.

6.1.1.3. CNO(Cluster Network Operator) 구성

Cluster Network Operator API는 다음 API 필드를 노출하여 BGP 라우팅을 구성합니다.

  • spec.additionalRoutingCapabilities: 클러스터의 FRR-K8s 데몬 배포를 활성화합니다. 이 데몬은 경로 알림과 독립적으로 사용할 수 있습니다. 활성화되면 FRR-K8s 데몬이 모든 노드에 배포됩니다.

6.1.1.4. BGP 라우팅 사용자 정의 리소스

다음 사용자 정의 리소스는 BGP 라우팅을 구성하는 데 사용됩니다.

FRRConfiguration
이 사용자 정의 리소스는 BGP 라우팅에 대한 FRR 구성을 정의합니다. 이 CR은 네임스페이스가 지정됩니다.

6.1.2. FRRConfiguration CR 구성

표준 MetalLB 기능 이외의 라우팅 동작을 사용자 지정하려면 FRRConfiguration CR(사용자 정의 리소스)을 구성합니다.

다음 참조 예제에서는 특정 FRRouting(FRR) 매개변수를 정의하여 경로 수신과 같은 고급 서비스를 활성화하는 방법을 보여줍니다.

Router 매개변수

router 매개변수를 사용하여 각 VRF(Virtual Routing and Forwarding) 리소스에 대해 여러 라우터를 구성할 수 있습니다. 각 라우터에 대해 Autonomous System Number (ASN)를 정의해야 합니다.

다음 예와 같이 BGP(Border Gateway Protocol) 조합 조합 목록을 정의할 수도 있습니다.

FRRConfiguration CR 예

apiVersion: frrk8s.metallb.io/v1beta1
kind: FRRConfiguration
metadata:
  name: test
  namespace: frr-k8s-system
spec:
  bgp:
    routers:
    - asn: 64512
      neighbors:
      - address: 172.30.0.3
        asn: 4200000000
        ebgpMultiHop: true
        port: 180
      - address: 172.18.0.6
        asn: 4200000000
        port: 179
# ...

toAdvertise 매개변수

기본적으로 FRR-K8s 는 라우터 구성의 일부로 구성된 접두사를 알리지 않습니다. 접두사를 알리려면 toAdvertise 매개변수를 사용합니다.

다음 예제와 같이 접두사의 하위 집합을 알릴 수 있습니다.

FRRConfiguration CR 예

apiVersion: frrk8s.metallb.io/v1beta1
kind: FRRConfiguration
metadata:
  name: test
  namespace: frr-k8s-system
spec:
  bgp:
    routers:
    - asn: 64512
      neighbors:
      - address: 172.30.0.3
        asn: 4200000000
        ebgpMultiHop: true
        port: 180
        toAdvertise:
          allowed:
            prefixes:
            - 192.168.2.0/24
      prefixes:
        - 192.168.2.0/24
        - 192.169.2.0/24
# ...

  • allowed.prefixes: 접두사의 하위 집합을 알립니다.

다음 예제에서는 모든 접두사를 알리는 방법을 보여줍니다.

FRRConfiguration CR 예

apiVersion: frrk8s.metallb.io/v1beta1
kind: FRRConfiguration
metadata:
  name: test
  namespace: frr-k8s-system
spec:
  bgp:
    routers:
    - asn: 64512
      neighbors:
      - address: 172.30.0.3
        asn: 4200000000
        ebgpMultiHop: true
        port: 180
        toAdvertise:
          allowed:
            mode: all
      prefixes:
        - 192.168.2.0/24
        - 192.169.2.0/24
# ...

  • allowed.mode: 모든 접두사를 알립니다.
toReceive 매개변수

기본적으로 FRR-K8s 는 인접자가 알리는 접두사를 처리하지 않습니다. toReceive 매개변수를 사용하여 이러한 주소를 처리할 수 있습니다.

다음 예제와 같이 접두사의 하위 집합에 대해 구성할 수 있습니다.

FRRConfiguration CR 예

apiVersion: frrk8s.metallb.io/v1beta1
kind: FRRConfiguration
metadata:
  name: test
  namespace: frr-k8s-system
spec:
  bgp:
    routers:
    - asn: 64512
      neighbors:
      - address: 172.18.0.5
          asn: 64512
          port: 179
          toReceive:
            allowed:
              prefixes:
              - prefix: 192.168.1.0/24
              - prefix: 192.169.2.0/24
                ge: 25
                le: 28
# ...

  • 접두사 가 le 접두사 길이보다 작거나 같고 접두사 길이보다 크거나 같은 경우 접두사 가 적용됩니다.

다음 예제에서는 발표된 모든 접두사를 처리하도록 FRR을 구성합니다.

FRRConfiguration CR 예

apiVersion: frrk8s.metallb.io/v1beta1
kind: FRRConfiguration
metadata:
  name: test
  namespace: frr-k8s-system
spec:
  bgp:
    routers:
    - asn: 64512
      neighbors:
      - address: 172.18.0.5
          asn: 64512
          port: 179
          toReceive:
            allowed:
              mode: all
# ...

bgp 매개변수

bgp 매개변수를 사용하여 다양한 BFD 프로필을 정의하고 이를 인접지와 연결할 수 있습니다. 다음 예에서 BFD 는 BGP 세션을 백업하고 FRR 은 링크 실패를 감지할 수 있습니다.

FRRConfiguration CR 예

apiVersion: frrk8s.metallb.io/v1beta1
kind: FRRConfiguration
metadata:
  name: test
  namespace: frr-k8s-system
spec:
  bgp:
    routers:
    - asn: 64512
      neighbors:
      - address: 172.30.0.3
        asn: 64512
        port: 180
        bfdProfile: defaultprofile
    bfdProfiles:
      - name: defaultprofile
# ...

nodeSelector 매개변수

기본적으로 FRR-K8s 는 데몬이 실행 중인 모든 노드에 구성을 적용합니다. nodeSelector 매개변수를 사용하여 구성을 적용할 노드를 지정할 수 있습니다. 예를 들면 다음과 같습니다.

FRRConfiguration CR 예

apiVersion: frrk8s.metallb.io/v1beta1
kind: FRRConfiguration
metadata:
  name: test
  namespace: frr-k8s-system
spec:
  bgp:
    routers:
    - asn: 64512
  nodeSelector:
    labelSelector:
    foo: "bar"
# ...

interface 매개변수

interface 매개변수를 사용하여 다음 예제 구성을 사용하여 번호가 지정되지 않은 BGP 피어링을 구성할 수 있습니다.

FRRConfiguration CR 예

apiVersion: frrk8s.metallb.io/v1beta1
kind: FRRConfiguration
metadata:
  name: test
  namespace: frr-k8s-system
spec:
  bgp:
    bfdProfiles:
    - echoMode: false
      name: simple
      passiveMode: false
    routers:
    - asn: 64512
      neighbors:
      - asn: 64512
        bfdProfile: simple
        disableMP: false
        interface: net10
        port: 179
        toAdvertise:
          allowed:
            mode: filtered
            prefixes:
            - 5.5.5.5/32
        toReceive:
          allowed:
            mode: filtered
      prefixes:
      - 5.5.5.5/32
# ...

  • networking.interface: 번호가 지정되지 않은 BGP 피어링을 활성화합니다.
참고

interface 매개변수를 사용하려면 두 BGP 피어 간에 지점 간 계층 2 연결을 설정해야 합니다. IPv4, IPv6 또는 듀얼 스택과 함께 번호가 지정되지 않은 BGP 피어링을 사용할 수 있지만 IPv6 RAs(Router Advertisements)를 활성화해야 합니다. 각 인터페이스는 하나의 BGP 연결로 제한됩니다.

이 매개변수를 사용하는 경우 spec.bgp.routers.neighbors.address 매개변수에 값을 지정할 수 없습니다.

FRRConfiguration 사용자 정의 리소스의 매개변수는 다음 표에 설명되어 있습니다.

표 6.1. MetalLB FRRConfiguration 사용자 정의 리소스
매개변수유형설명

spec.bgp.routers

array

FRR이 구성할 라우터를 지정합니다( VRF당 하나씩).

spec.bgp.routers.asn

integer

세션의 로컬 종료에 사용할 자동 시스템 번호(ASN)입니다.

spec.bgp.routers.id

string

bgp 라우터의 ID를 지정합니다.

spec.bgp.routers.vrf

string

이 라우터에서 세션을 설정하는 데 사용되는 호스트 VRF를 지정합니다.

spec.bgp.routers.neighbors

array

BGP 세션을 설정하는 포인을 지정합니다.

spec.bgp.routers.neighbors.asn

integer

세션의 원격 끝에 사용할 ASN을 지정합니다. 이 매개변수를 사용하는 경우 spec.bgp.routers.neighbors.dynamicASN 매개변수에 값을 지정할 수 없습니다.

spec.bgp.routers.neighbors.dynamicASN

string

명시적으로 설정하지 않고 세션의 원격 끝에 사용할 ASN을 감지합니다. 동일한 ASN이 있는 인접지의 내부 또는 다른 ASN을 가진 인접자의 경우 외부 를 지정합니다. 이 매개변수를 사용하는 경우 spec.bgp.routers.neighbors.asn 매개변수에 값을 지정할 수 없습니다.

spec.bgp.routers.neighbors.address

string

세션을 설정할 IP 주소를 지정합니다. 이 매개변수를 사용하는 경우 spec.bgp.routers.neighbors.interface 매개변수에 값을 지정할 수 없습니다.

spec.bgp.routers.neighbors.interface

string

세션을 설정할 때 사용할 인터페이스 이름을 지정합니다. 이 매개변수를 사용하여 번호가 지정되지 않은 BGP 피어링을 구성합니다. 두 BGP 피어 간에 지점 간 계층 2 연결이 있어야 합니다. IPv4, IPv6 또는 듀얼 스택과 함께 번호가 지정되지 않은 BGP 피어링을 사용할 수 있지만 IPv6 RAs(Router Advertisements)를 활성화해야 합니다. 각 인터페이스는 하나의 BGP 연결로 제한됩니다.

spec.bgp.routers.neighbors.port

integer

세션을 설정할 때 사용할 포트를 지정합니다. 기본값은 179 입니다.

spec.bgp.routers.neighbors.password

string

BGP 세션을 설정하는 데 사용할 암호를 지정합니다. password 와 PasswordSecret 은 함께 사용할 수 없습니다.

spec.bgp.routers.neighbors.passwordSecret

string

피어에 대한 인증 시크릿의 이름을 지정합니다. 시크릿은 "kubernetes.io/basic-auth" 유형이어야 하며 FRR-K8s 데몬과 동일한 네임스페이스에 있어야 합니다. "password" 키는 암호를 시크릿에 저장합니다. password 와 PasswordSecret 은 함께 사용할 수 없습니다.

spec.bgp.routers.neighbors.holdTime

duration

RFC4271에 따라 요청된 BGP 보류 시간을 지정합니다. 기본값은 180s입니다.

spec.bgp.routers.neighbors.keepaliveTime

duration

RFC4271에 따라 요청된 BGP keepalive 시간을 지정합니다. 기본값은 60s 입니다.

spec.bgp.routers.neighbors.connectTime

duration

BGP가 인접한 연결 시도 사이에 대기하는 시간을 지정합니다.

spec.bgp.routers.neighbors.ebgpMultiHop

boolean

BGPPeer가 다중 홉인지 여부를 나타냅니다.

spec.bgp.routers.neighbors.bfdProfile

string

BGP 세션과 연결된 BFD 세션에 사용할 BFD 프로필의 이름을 지정합니다. 설정되지 않은 경우 BFD 세션이 설정되지 않습니다.

spec.bgp.routers.neighbors.toAdvertise.allowed

array

인접지 및 관련 속성에 알리는 접두사 목록을 나타냅니다.Represents the list of prefixes to advertise to a neighbor, and the associated properties.

spec.bgp.routers.neighbors.toAdvertise.allowed.prefixes

문자열 배열

인접지에게 알리기 위한 접두사 목록을 지정합니다. 이 목록은 라우터에서 정의한 접두사와 일치해야 합니다.

spec.bgp.routers.neighbors.toAdvertise.allowed.mode

string

접두사를 처리할 때 사용할 모드를 지정합니다. 접두사 목록의 접두사만 허용하도록 filtered 로 설정할 수 있습니다. 라우터에 구성된 모든 접두사를 허용하도록 all 으로 설정할 수 있습니다.

spec.bgp.routers.neighbors.toAdvertise.withLocalPref

array

공개된 로컬 기본 설정과 연결된 접두사를 지정합니다. 광고할 수 있도록 허용된 접두사에 로컬 기본 설정과 연결된 접두사를 지정해야 합니다.

spec.bgp.routers.neighbors.toAdvertise.withLocalPref.prefixes

문자열 배열

로컬 기본 설정과 연결된 접두사를 지정합니다.

spec.bgp.routers.neighbors.toAdvertise.withLocalPref.localPref

integer

접두사와 연결된 로컬 기본 설정을 지정합니다.

spec.bgp.routers.neighbors.toAdvertise.withCommunity

array

공개된 BGP 커뮤니티와 관련된 접두사를 지정합니다. 광고하려는 접두사 목록에 로컬 기본 설정과 연결된 접두사를 포함해야 합니다.

spec.bgp.routers.neighbors.toAdvertise.withCommunity.prefixes

문자열 배열

커뮤니티와 연결된 접두사를 지정합니다.

spec.bgp.routers.neighbors.toAdvertise.withCommunity.community

string

접두사와 연결된 커뮤니티를 지정합니다.

spec.bgp.routers.neighbors.toReceive

array

인접자로부터 수신할 접두사를 지정합니다.

spec.bgp.routers.neighbors.toReceive.allowed

array

인접자로부터 수신하려는 정보를 지정합니다.

spec.bgp.routers.neighbors.toReceive.allowed.prefixes

array

인접지에서 허용되는 접두사를 지정합니다.

spec.bgp.routers.neighbors.toReceive.allowed.mode

string

접두사를 처리할 때 사용할 모드를 지정합니다. filtered 로 설정하면 prefixes 목록의 접두사만 허용됩니다. all 로 설정하면 라우터에 구성된 모든 접두사가 허용됩니다.

spec.bgp.routers.neighbors.disableMP

boolean

IPv4 및 IPv6 경로 교환을 별도의 BGP 세션으로 분리하지 못하도록 MP BGP를 비활성화합니다.

spec.bgp.routers.prefixes

문자열 배열

이 라우터 인스턴스에서 알릴 접두사를 모두 지정합니다.

spec.bgp.bfdProfiles

array

토론을 구성할 때 사용할 BFD 프로필 목록을 지정합니다.

spec.bgp.bfdProfiles.name

string

구성의 다른 부분에서 참조할 BFD 프로필의 이름입니다.

spec.bgp.bfdProfiles.receiveInterval

integer

이 시스템에서 제어 패킷을 수신할 수 있는 최소 간격(밀리초)을 지정합니다. 기본값은 300ms 입니다.

spec.bgp.bfdProfiles.transmitInterval

integer

이 시스템에서 BFD 제어 패킷을 밀리초 단위로 보내는 데 사용할 최소 전송 간격을 지정합니다. 기본값은 300ms 입니다.

spec.bgp.bfdProfiles.detectMultiplier

integer

패킷 손실을 확인하기 위해 감지 수를 구성합니다. 연결 손실 감지 타이머를 확인하려면 원격 전송 간격을 이 값으로 곱합니다.

spec.bgp.bfdProfiles.echoInterval

integer

이 시스템에서 처리할 수 있는 최소 에코 수신 전송 간격을 밀리초 단위로 구성합니다. 기본값은 50ms 입니다.

spec.bgp.bfdProfiles.echoMode

boolean

에코 전송 모드를 활성화하거나 비활성화합니다. 이 모드는 기본적으로 비활성화되어 있으며 멀티 홉 설정에서 지원되지 않습니다.

spec.bgp.bfdProfiles.passiveMode

boolean

세션을 패시브로 표시합니다. 수동 세션은 연결을 시작하지 않고 응답을 시작하기 전에 피어의 제어 패킷을 기다립니다.

spec.bgp.bfdProfiles.MinimumTtl

integer

멀티 홉 세션만 사용할 수 있습니다. 들어오는 BFD 제어 패킷에 대해 예상되는 최소 TTL을 구성합니다.

spec.nodeSelector

string

이 구성을 적용하려는 노드를 제한합니다. 지정된 경우 라벨이 지정된 선택기와 일치하는 노드만 구성을 적용하려고 합니다. 지정하지 않으면 모든 노드에서 이 구성을 적용하려고 합니다.

status

string

FRRConfiguration의 관찰 상태를 정의합니다.

no-overlay 모드를 사용하여 클래스 3 Pod 트래픽을 BGP로 직접 라우팅하여 캡슐화 오버헤드를 줄이고 east-west 성능을 향상시킬 수 있습니다.

no-overlay 모드는 기본 클러스터 네트워크에 대한 기본 캡슐화를 비활성화하고 BGP가 지정된 경로를 사용하여 노드 간에 Pod 트래픽을 전달합니다. 클러스터는 오버레이와 no-overlay 네트워크를 동시에 실행할 수 있습니다.

기본 클러스터 네트워크의 경우 no-overlay는 관리 및 관리되지 않는 라우팅을 지원합니다. 관리형 라우팅을 사용하면 OVN-Kubernetes는 클러스터 노드 간에 전체 메시 BGP 패브릭을 생성하므로 외부 BGP 라우터가 필요하지 않으며 Pod 경로는 클러스터 외부에 광고되지 않습니다(클러스터 간 트래픽만 해당). 관리형 라우팅을 사용하려면 계층 2에서 노드를 직접 연결해야 합니다. 다른 서브넷의 노드가 있는 클러스터에는 적합하지 않습니다. 기본 네트워크에서 관리되지 않는 라우팅을 사용하면 외부 BGP 피어를 구성하고 RouteAdvertisements CR(사용자 정의 리소스)을 사용하여 Pod 서브넷을 기존 BGP 인프라에 알립니다.

ClusterUserDefinedNetwork CR에서 정의하는 기본 네트워크의 경우 no-overlay는 관리되지 않는 라우팅만 지원합니다. CUDN에 대한 외부 BGP 피어 및 RouteAdvertisements CR을 구성합니다.

요구 사항
  • OVN-Kubernetes 네트워크 플러그인을 사용하는 베어 메탈 클러스터입니다.
  • 클러스터에 대해 단일 노드 영역 상호 연결 모드가 활성화되어 있습니다.
  • BGP 라우팅이 활성화되고 FRR-K8이 배포되었습니다.
  • 계층 3 네트워크만( ClusterUserDefinedNetwork CR에 의해 정의된 기본 네트워크 또는 기본 네트워크).
제한
  • 계층 2 네트워크에는 오버레이(no-overlay) 모드가 지원되지 않습니다.
  • no-overlay 네트워크에는 EgressIP, EgressService, IPsec, multicast 및 여러 외부 게이트웨이가 지원되지 않습니다.
  • overlay와 no-overlay 모드 간에 기존 네트워크를 전환하는 것은 ClusterUserDefinedNetwork CR을 사용하여 지원되지 않습니다.
지원되는 게이트웨이 모드
  • 기본 클러스터 네트워크에서 no-overlay는 로컬 게이트웨이(LGW) 모드 및 공유 게이트웨이(SGW) 모드에서 모두 지원됩니다.
  • ClusterUserDefinedNetwork CR에서 정의하는 기본 네트워크에서는 LGW 및 SGW 모드에서 no-overlay가 지원됩니다.

    중요

    externalTrafficPolicy 가 Cluster 로 설정되어 있고 백엔드 Pod가 요청 대상이 되는 것과 다른 노드에 있는 경우 NoOverlay 전송 모드로 구성된 CUDN에서 실행되는 Pod는 NodePort 서비스에 대한 TCP 연결을 설정할 수 없습니다. 이 문제는 아웃바운드 SNAT가 활성화되었는지 또는 비활성화되었는지 여부와 관계없이 발생합니다.

6.2. BGP 라우팅 활성화

동적 경로 알림 및 외부 네트워크 인프라와의 통합을 지원하기 위해 클러스터 관리자로 클러스터에 대해 BGP(Border Gateway Protocol) 라우팅을 활성화할 수 있습니다.

클러스터 관리자는 클러스터에 대한 OVN-Kubernetes BGP 라우팅 지원을 활성화할 수 있습니다.

6.2.1. BGP(Border Gateway Protocol) 라우팅 활성화

지원되는 인프라에서 외부 네트워크 통합 및 경로 알림을 허용하려면 FRR 기반 동적 라우팅 공급자를 사용하도록 클러스터 네트워크를 구성하여 클러스터에 BGP(Border Gateway Protocol) 라우팅을 활성화할 수 있습니다.

클러스터 관리자는 베어 메탈 인프라에서 클러스터에 대한 BGP 라우팅 지원을 활성화할 수 있습니다.

MetalLB Operator와 함께 BGP 라우팅을 사용하는 경우 필요한 BGP 라우팅 지원이 자동으로 활성화됩니다. BGP 라우팅 지원을 수동으로 활성화할 필요가 없습니다.

사전 요구 사항

  • OpenShift CLI(oc)가 설치되어 있습니다.
  • cluster-admin 역할의 사용자로 클러스터에 로그인되어 있습니다.
  • 클러스터는 호환 가능한 인프라에 설치됩니다.

프로세스

  • 동적 라우팅 공급자를 활성화하려면 다음 명령을 입력합니다.

    $ oc patch Network.operator.openshift.io/cluster --type=merge -p '{
      "spec": {
        "additionalRoutingCapabilities": {
          "providers": ["FRR"]
        }
      }
    }'

6.3. BGP 라우팅 비활성화

외부 경로 알림을 중지하고 표준 클러스터 네트워킹 동작을 복원하려면 OVN-Kubernetes BGP(Border Gateway Protocol) 라우팅을 비활성화합니다.

클러스터 관리자는 클러스터에 대한 OVN-Kubernetes BGP 라우팅 지원을 비활성화할 수 있습니다.

6.3.1. BGP(Border Gateway Protocol) 라우팅 비활성화

네트워크 구성에서 추가 라우팅 기능을 제거하여 클러스터의 BGP(Border Gateway Protocol) 라우팅을 비활성화합니다.

클러스터 관리자는 베어 메탈 인프라에서 클러스터에 대한 BGP 라우팅 지원을 비활성화할 수 있습니다.

사전 요구 사항

  • OpenShift CLI(oc)가 설치되어 있습니다.
  • cluster-admin 역할의 사용자로 클러스터에 로그인되어 있습니다.
  • 클러스터는 호환 가능한 인프라에 설치됩니다.

프로세스

  • 동적 라우팅을 비활성화하려면 다음 명령을 입력합니다.

    $ oc patch Network.operator.openshift.io/cluster --type=merge -p '{
      "spec": { "additionalRoutingCapabilities": null }
    }'

6.4. BGP를 사용하여 underlay에서 Pod를 라우팅하여 동서부 성능 개선

베어 메탈 클러스터에서 동서의 성능을 개선하려면 Pod 트래픽이 Geneve 캡슐화 대신 오버레이 라우팅을 사용하도록 BGP(Border Gateway Protocol)를 사용하여 no-overlay 모드를 구성합니다.

중요

BGP를 사용하는 덮어쓰기 모드는 기술 프리뷰 기능 전용입니다. 기술 프리뷰 기능은 Red Hat 프로덕션 서비스 수준 계약(SLA)에서 지원되지 않으며 기능적으로 완전하지 않을 수 있습니다. 따라서 프로덕션 환경에서 사용하는 것은 권장하지 않습니다. 이러한 기능을 사용하면 향후 제품 기능을 조기에 이용할 수 있어 개발 과정에서 고객이 기능을 테스트하고 피드백을 제공할 수 있습니다.

Red Hat 기술 프리뷰 기능의 지원 범위에 대한 자세한 내용은 기술 프리뷰 기능 지원 범위를 참조하십시오.

no-overlay 모드를 사용하여 클래스 3 Pod 트래픽을 BGP로 직접 라우팅하여 캡슐화 오버헤드를 줄이고 east-west 성능을 향상시킬 수 있습니다.

no-overlay 모드는 기본 클러스터 네트워크에 대한 기본 캡슐화를 비활성화하고 BGP가 지정된 경로를 사용하여 노드 간에 Pod 트래픽을 전달합니다. 클러스터는 오버레이와 no-overlay 네트워크를 동시에 실행할 수 있습니다.

기본 클러스터 네트워크의 경우 no-overlay는 관리 및 관리되지 않는 라우팅을 지원합니다. 관리형 라우팅을 사용하면 OVN-Kubernetes는 클러스터 노드 간에 전체 메시 BGP 패브릭을 생성하므로 외부 BGP 라우터가 필요하지 않으며 Pod 경로는 클러스터 외부에 광고되지 않습니다(클러스터 간 트래픽만 해당). 관리형 라우팅을 사용하려면 계층 2에서 노드를 직접 연결해야 합니다. 다른 서브넷의 노드가 있는 클러스터에는 적합하지 않습니다. 기본 네트워크에서 관리되지 않는 라우팅을 사용하면 외부 BGP 피어를 구성하고 RouteAdvertisements CR(사용자 정의 리소스)을 사용하여 Pod 서브넷을 기존 BGP 인프라에 알립니다.

ClusterUserDefinedNetwork CR에서 정의하는 기본 네트워크의 경우 no-overlay는 관리되지 않는 라우팅만 지원합니다. CUDN에 대한 외부 BGP 피어 및 RouteAdvertisements CR을 구성합니다.

요구 사항
  • OVN-Kubernetes 네트워크 플러그인을 사용하는 베어 메탈 클러스터입니다.
  • 클러스터에 대해 단일 노드 영역 상호 연결 모드가 활성화되어 있습니다.
  • BGP 라우팅이 활성화되고 FRR-K8이 배포되었습니다.
  • 계층 3 네트워크만( ClusterUserDefinedNetwork CR에 의해 정의된 기본 네트워크 또는 기본 네트워크).
제한
  • 계층 2 네트워크에는 오버레이(no-overlay) 모드가 지원되지 않습니다.
  • no-overlay 네트워크에는 EgressIP, EgressService, IPsec, multicast 및 여러 외부 게이트웨이가 지원되지 않습니다.
  • overlay와 no-overlay 모드 간에 기존 네트워크를 전환하는 것은 ClusterUserDefinedNetwork CR을 사용하여 지원되지 않습니다.
지원되는 게이트웨이 모드
  • 기본 클러스터 네트워크에서 no-overlay는 로컬 게이트웨이(LGW) 모드 및 공유 게이트웨이(SGW) 모드에서 모두 지원됩니다.
  • ClusterUserDefinedNetwork CR에서 정의하는 기본 네트워크에서는 LGW 및 SGW 모드에서 no-overlay가 지원됩니다.

    중요

    externalTrafficPolicy 가 Cluster 로 설정되어 있고 백엔드 Pod가 요청 대상이 되는 것과 다른 노드에 있는 경우 NoOverlay 전송 모드로 구성된 CUDN에서 실행되는 Pod는 NodePort 서비스에 대한 TCP 연결을 설정할 수 없습니다. 이 문제는 아웃바운드 SNAT가 활성화되었는지 또는 비활성화되었는지 여부와 관계없이 발생합니다.

6.4.2. 클러스터의 오버레이 라우팅 계획 및 BGP

라우팅 모드, BGP 토폴로지 및 SNAT 동작을 계획하여 Pod 서브넷을 라우팅할 수 있고 클러스터 크기에 맞게 설계 스케일링을 수행할 수 있습니다.

워크플로우 및 타이밍

CNO(Cluster Network Operator)가 설정을 적용하도록 네트워크 사용자 정의 리소스(CR)를 구성하여 클러스터에서 BGP를 활성화할 필요가 없습니다.

기술 프리뷰 기능은 없지만 설치 시 TechPreviewNoUpgrade 기능을 활성화하십시오. 기본 클러스터 네트워크에서 0 일부터 기능을 사용하려는 경우 설치 시에 TechPreviewNoUpgrade 기능을 활성화합니다.

0일 차(설치): 기본 클러스터 네트워크에서 no-overlay를 사용하는 경우 설치 매니페스트 / 디렉토리에 매니페스트를 제공하여 클러스터가 생성될 때 BGP 및 no-overlay 설정이 적용됩니다.

2일 차(클러스터 실행): network.operator/cluster 를 패치하여 관리되지 않는 라우팅을 사용하여 클러스터의 outboundSNAT 필드를 조정할 수 있습니다. 설치 후 no-overlay를 사용하는 기본 ClusterUserDefinedNetwork (CUDN) 리소스를 생성하거나 업데이트할 수 있습니다.

라우팅 모드
기본 클러스터 네트워크에서 관리되는 라우팅은 노드 간에 전체 메시 BGP 패브릭을 생성하고 더 쉽게 작동할 수 있습니다. 노드를 계층 2에서 직접 연결해야 하며 다른 서브넷의 노드에는 적합하지 않습니다. 관리되지 않는 라우팅을 사용하면 외부 피어 및 라우팅 정책을 제어할 수 있으며 일반적으로 외부 BGP와 통합할 때 또는 노드가 동일한 계층 2 세그먼트에 없는 경우 사용됩니다.
BGP 토폴로지
기본 클러스터 네트워크에서 관리되는 라우팅의 경우 지원되는 토폴로지는 노드 간에 전체 메시이므로 모든 노드가 다른 모든 노드와 피어링됩니다. 관리되지 않는 라우팅은 FRRConfiguration 및 RouteAdvertisements CR과 함께 외부 라우터에 eBGP와 같은 자체 설계를 사용합니다.
참고

관리 라우팅 및 전체 메시 BGP 토폴로지는 해당 모드를 선택할 때 기본 클러스터 네트워크에 적용됩니다. 오버레이가 없는 기본 ClusterUserDefinedNetwork 에는 외부 BGP 피어를 계획하고, 해당 네트워크의 FRRConfiguration 및 RouteAdvertisements CR을 생성하고, spec.network.noOverlayOptions.outboundSNAT 를 Disabled 로 설정하는 관리되지 않는 라우팅이 필요합니다.

SNAT 동작
Pod IP를 외부 네트워크에서 라우팅할 수 없는 경우 아웃바운드 SNAT를 활성화합니다. underlay에서 Pod IP를 직접 라우팅할 수 있는 경우 아웃바운드 SNAT를 비활성화합니다.
IP 주소 계획
기존 네트워크와 겹치지 않도록 Pod 서브넷 및 노드 서브넷을 할당하고 BGP 패브릭에 알릴 수 있습니다.

6.4.3. 기본 클러스터 네트워크의 오버레이 라우팅 활성화

Geneve 대신 기본 네트워크의 동서 트래픽을 유도하려면 NoOverlay 전송에 대해 CNO(Cluster Network Operator)를 구성하고 소스 네트워크 주소 변환(SNAT) 및 라우팅을 설정합니다. 관리되지 않는 라우팅을 사용하는 경우 라우터에서 Pod 경로를 교환하도록 FRRConfiguration 및 RouteAdvertisements CR(사용자 정의 리소스)을 적용합니다.

사전 요구 사항

  • cluster-admin 권한이 있어야 합니다.
  • 클러스터는 단일 노드 영역 상호 연결 모드가 있는 베어 메탈 인프라에 설치됩니다.
  • 클러스터에 대해 BGP(Border Gateway Protocol) 라우팅을 활성화했습니다. 자세한 내용은 "BGP 라우팅 정보" 및 "BGP 라우팅 활성화"를 참조하십시오.
  • BGP 사전 요구 사항과 함께 설치된 클러스터 노드에 FRR-K8s를 배포했습니다.
중요
  • Pod IP가 외부 네트워크에서 라우팅 가능한지 여부에 따라 spec.defaultNetwork.ovnKubernetesConfig.noOverlayConfig.outboundSNAT 를 선택합니다. Pod IP 주소를 직접 라우팅할 수 있는 경우 사용 안 함으로 설정하고, 오버레이에서 Pod IP 주소를 직접 라우팅할 수 있는 경우 Disabled 로 설정할 수 있습니다.
  • 관리되지 않는 모드의 경우 outboundSNAT 를 Enabled 로 설정해야 합니다. 그렇지 않으면 클러스터 배포가 실패합니다.

절차

  1. CNO(Cluster Network Operator) CR(사용자 정의 리소스)에서 기본 네트워크에 대해 no-overlay를 활성화합니다.

    1. 설치 시간(일 0)에서 설치 매니페스트/ 디렉터리에 BGP 매니페스트를 설정하여 다음 관리 및 관리되지 않는 라우팅 예와 같은 noOverlayConfig 오브젝트를 구성합니다.

      관리되지 않는 라우팅이 있는 no-overlay를 사용하는 CNO CR의 예

      apiVersion: operator.openshift.io/v1
      kind: Network
      metadata:
        name: cluster
      spec:
        additionalRoutingCapabilities:
          providers:
          - FRR
        defaultNetwork:
          ovnKubernetesConfig:
            routeAdvertisements: Enabled
            transport: NoOverlay
            noOverlayConfig:
              outboundSNAT: Enabled
              routing: Unmanaged
          type: OVNKubernetes

      관리형 라우팅과 함께 no-overlay를 사용하는 CNO CR의 예

      apiVersion: operator.openshift.io/v1
      kind: Network
      metadata:
        name: cluster
      spec:
        additionalRoutingCapabilities:
          providers:
          - FRR
        defaultNetwork:
          ovnKubernetesConfig:
            routeAdvertisements: Enabled
            transport: NoOverlay
            noOverlayConfig:
              outboundSNAT: Enabled
              routing: Managed
              bgpTopology: FullMesh
              asNumber: 64512
          type: OVNKubernetes

      spec.defaultNetwork.ovnKubernetesConfig.noOverlayConfig.bgpTopology
      노드 간 전체mesh BGP 패브릭의 FullMesh 를 지정합니다.
      spec.defaultNetwork.ovnKubernetesConfig.noOverlayConfig.asNumber
      선택 사항: 기본 VRF에 사용되는 BGP 자율 시스템 번호를 지정합니다. 생략하면 64512 가 사용됩니다.
    2. 실행 중인 클러스터(일 2)에서 다음 명령을 사용하여 CNO에서 noOverlayConfig 오브젝트를 구성합니다.

      $ oc patch network.operator.openshift.io cluster --type merge --patch '{"spec":{"defaultNetwork":{"ovnKubernetesConfig":{"noOverlayConfig":{"outboundSNAT":"Enabled"}}}}}'
    3. 관리형 라우팅의 경우 확인 단계를 진행합니다. RouteAdvertisements 또는 FRRConfiguration 오브젝트를 생성하지 마십시오. OVN-Kubernetes는 관리 BGP 패브릭을 조정할 수 있습니다.
  2. 관리되지 않는 라우팅을 사용하는 경우 다음 CR(사용자 정의 리소스)의 설치 매니페스트/ 디렉터리(일 0)에 매니페스트를 추가합니다.

    1. 다음 FRRConfiguration CR을 추가합니다.

      apiVersion: frrk8s.metallb.io/v1beta1
      kind: FRRConfiguration
      metadata:
        name: external-bgp
        namespace: openshift-frr-k8s
        labels:
          network: default
      spec:
        bgp:
          routers:
          - asn: 64512
            neighbors:
            - address: 192.168.111.1
              asn: 64512
              disableMP: true
              toReceive:
                allowed:
                  mode: filtered

      spec.bgp.routers[].neighbors[].address, ASN 값을 교체하고 외부 BGP 설계와 일치하도록 필터를 수신합니다.

    2. 다음 RouteAdvertisements CR을 추가합니다.

      apiVersion: k8s.ovn.org/v1
      kind: RouteAdvertisements
      metadata:
        name: default
      spec:
        advertisements:
        - PodNetwork
        frrConfigurationSelector:
          matchLabels:
            network: default
  3. 선택 사항: 또는 oc apply 를 사용하여 다음 CR을 생성하거나 적용할 수 있습니다(일 2).

    1. 외부 라우터에 대해 BGP 피어링을 정의하는 FRRConfiguration CR을 생성합니다.

      관리되지 않는 라우팅을 위한 FRRConfiguration CR의 예

      apiVersion: frrk8s.metallb.io/v1beta1
      kind: FRRConfiguration
      metadata:
        name: external-bgp
        namespace: openshift-frr-k8s
        labels:
          network: default
      spec:
        bgp:
          routers:
          - asn: 64512
            neighbors:
            - address: 192.168.111.1
              asn: 64512
              disableMP: true
              toReceive:
                allowed:
                  mode: filtered

      spec.bgp.routers[].neighbors[].address, ASN 값을 교체하고 외부 BGP 설계와 일치하도록 필터를 수신합니다.

    2. 다음 명령을 사용하여 FRRConfiguration CR을 적용합니다.

      $ oc apply -f <frrconfiguration_file>.yaml

      & lt;frrconfiguration_file>.yaml 을 매니페스트 파일 이름으로 바꿉니다.

    3. Pod 네트워크를 알리는 RouteAdvertisements CR을 생성합니다.

      관리되지 않는 라우팅을 위한 RouteAdvertisements CR의 예

      apiVersion: k8s.ovn.org/v1
      kind: RouteAdvertisements
      metadata:
        name: default
      spec:
        advertisements:
        - PodNetwork
        frrConfigurationSelector:
          matchLabels:
            network: default
        networkSelectors:
        - networkSelectionType: DefaultNetwork
        nodeSelector: {}

      참고

      기본 네트워크에서 관리되지 않는 라우팅의 경우 하나 이상의 RouteAdvertisements 오브젝트가 기본 네트워크를 선택해야 합니다. 이 예에서 networkSelectionType: DefaultNetwork 가 있는 spec.networkSelectors 항목은 기본 네트워크 spec.advertisements 를 선택하면 PodNetwork 가 포함되며 RouteAdvertisements CR은 status에서 Accepted=True 에 도달합니다. pod 서브넷을 BGP 인프라로 알릴 때 OVN-Kubernetes는 이 구성을 사용합니다.

    4. 다음 명령을 사용하여 RouteAdvertisements CR을 적용합니다.

      $ oc apply -f <routeadvertisements_file>.yaml

      & lt;routeadvertisements_file>.yaml 을 파일 이름으로 바꿉니다.

검증

  1. OVN-Kubernetes Pod가 실행 중인지 확인합니다.

    $ oc get pods -n openshift-ovn-kubernetes

6.4.4. underlay 라우팅을 사용하는 ClusterUserDefinedNetwork CR 생성

오버레이 전송 및 관리되지 않는 라우팅이 포함된 3 계층 ClusterUserDefinedNetwork (CUDN) 사용자 정의 리소스(CR)를 생성하여 Pod는 east-west 트래픽에 대한 캡슐화 대신 BGP 경로를 사용합니다.

FRRConfiguration 및 RouteAdvertisements CR을 사용하여 Pod 서브넷을 알립니다. 기본 클러스터 네트워크의 노드 간 관리형 라우팅 및 전체 메시 BGP 패브릭은 "기본 클러스터 네트워크의 오버레이 라우팅 활성화"를 참조하십시오.

중요
  • 기본 CUDN에서 NoOverlay 모드는 관리되지 않는 라우팅만 지원합니다. 관리형 라우팅(외부 피어가 없는 노드 간 전체 메시 BGP)은 기본 클러스터 네트워크에서만 지원됩니다.
  • 기본 CUDN에서는 NoOverlay 전송 및 Enabled 로 설정된 아웃바운드SNAT 는 지원되지 않습니다.

사전 요구 사항

  • cluster-admin 권한이 있어야 합니다.
  • 클러스터는 단일 노드 영역 상호 연결 모드가 있는 베어 메탈 인프라에 설치됩니다.
  • TechPreviewNoUpgrade 기능 세트에서 NoOverlayMode 기능 플래그를 활성화했습니다.
  • 클러스터에 대해 BGP 라우팅 지원을 활성화했습니다.
  • 클러스터 노드에 FRR-K8을 배포했습니다.

절차

  1. no-overlay 전송을 사용하는 ClusterUserDefinedNetwork CR을 생성합니다.

    참고

    기본 계층 3 ClusterUserDefinedNetwork CR의 경우 spec.namespaceSelector 와 일치하는 모든 네임스페이스에 k8s.ovn.org/primary-user-defined-network 레이블을 워크로드가 네트워크를 사용하기 전에 포함해야 합니다. 해당 레이블은 네임스페이스가 생성될 때만 설정할 수 있습니다.

    1. spec.network.noOverlayOptions.routing 을 Unmanaged 로 설정합니다.

      outboundSNAT 가 Disabled로 설정된 no-overlay 모드의 ClusterUserDefinedNetwork CR의 예

      apiVersion: k8s.ovn.org/v1
      kind: ClusterUserDefinedNetwork
      metadata:
        name: high-perf-network
        labels:
          network: high-perf-network
      spec:
        namespaceSelector:
          matchLabels:
            app: performance-sensitive
        network:
          topology: Layer3
          layer3:
            role: Primary
            subnets:
            - cidr: 10.200.0.0/16
              hostSubnet: 24
          transport: "NoOverlay"
          noOverlayOptions:
            outboundSNAT: "Disabled"
            routing: "Unmanaged"

      중요

      NoOverlay 모드를 실행하는 CUDN에서 실행되는 Pod는 NodePort 서비스에 대한 TCP 연결을 설정할 수 없습니다. 이는 externalTrafficPolicy 가 Cluster 로 설정되고 백엔드 Pod가 요청에서 대상으로 하는 노드와 다른 노드에 있을 때 발생합니다. 이 문제는 아웃바운드 SNAT가 활성화되었는지 또는 비활성화되었는지 여부와 관계없이 발생합니다.

    2. 다음 명령을 입력하여 ClusterUserDefinedNetwork CR을 적용합니다.

      $ oc apply -f <cudn_file>.yaml

      & lt;cudn_file>.yaml 을 ClusterUserDefinedNetwork CR 파일의 이름으로 바꿉니다.

  2. RouteAdvertisements CR 생성

    1. spec.advertisements 를 PodNetwork 로 설정하여 CUDN Pod 서브넷을 외부 BGP 인프라에 알립니다.

      CUDN pod 서브넷을 알리는 RouteAdvertisements CR의 예

      apiVersion: k8s.ovn.org/v1
      kind: RouteAdvertisements
      metadata:
        name: high-perf-network
      spec:
        nodeSelector: {}
        frrConfigurationSelector:
          matchLabels:
            network: high-perf-network
        networkSelectors:
        - networkSelectionType: ClusterUserDefinedNetworks
          clusterUserDefinedNetworkSelector:
            networkSelector:
              matchLabels:
                network: high-perf-network
        advertisements:
        - PodNetwork

      다음과 같습니다.

      spec.nodeSelector
      광고에 포함할 노드를 지정합니다. 비어 있는 경우({}) 모든 노드가 선택됩니다.
      spec.frrConfigurationSelector
      외부 라우터와 피어링하는 FRRConfiguration 을 지정합니다. matchLabels 를 사용하여 해당 라벨에 따라 FRRConfiguration 을 선택합니다.
      spec.networkSelectors.networkSelectionType
      알릴 네트워크 유형을 지정합니다. ClusterUserDefinedNetworks 로 설정하여 CUDN(클러스터 사용자 정의 네트워크)을 알립니다. 기본 클러스터 네트워크를 알리려면 DefaultNetwork 로 설정합니다.
      spec.advertisements
      알릴 네트워크 유형을 지정합니다. PodNetwork 로 설정하여 Pod 서브넷을 알립니다. EgressIP 를 알리려면 EgressIP로 설정합니다.
    2. 다음 명령을 입력하여 RouteAdvertisements CR을 적용합니다.

      $ oc apply -f <routeadvertisements_file>.yaml

      & lt;routeadvertisements_file>.yaml 을 RouteAdvertisements CR 파일의 이름으로 바꿉니다.

  3. 다음 명령을 입력하여 no-overlay 전송이 수락되었는지 확인합니다.

    $ oc get clusteruserdefinednetwork high-perf-network -o yaml

기본 OVN-Kubernetes 클러스터 네트워크의 BGP, 라우팅 알림, no-overlay 모드를 제어하는 CNO(Cluster Network Operator) 필드를 검토합니다. 기본 네트워크의 no-overlay 모드는 CNO CR에 구성됩니다.

BGP, no-overlay, 관리형 라우팅이 있는 CNO CR의 예

apiVersion: operator.openshift.io/v1
kind: Network
metadata:
  name: cluster
spec:
  additionalRoutingCapabilities:
    providers:
    - FRR
  defaultNetwork:
    ovnKubernetesConfig:
      routeAdvertisements: Enabled
      transport: NoOverlay
      noOverlayConfig:
        outboundSNAT: Enabled
        routing: Managed
        bgpTopology: FullMesh
        asNumber: 64512
    type: OVNKubernetes

다음과 같습니다.

spec.defaultNetwork.type
OVNKubernetes 여야 합니다.
spec.additionalRoutingCapabilities.providers
클러스터의 추가 라우팅 구성 요소를 지정합니다. BGP 및 경로 알림의 경우 FRR 을 포함하므로 FRR-K8이 노드에 배포됩니다.
spec.defaultNetwork.ovnKubernetesConfig.routeAdvertisements
클러스터가 RouteAdvertisements 오브젝트 및 관련 BGP 구성에 의해 구성된 대로 경로를 가져오고 알릴 수 있는지 여부를 지정합니다. 클러스터가 RouteAdvertisements 오브젝트 및 관련 BGP 구성에 의해 구성된 대로 경로를 가져오고 알릴 수 있도록 Enabled 로 설정합니다.
spec.defaultNetwork.ovnKubernetesConfig.transport
전송 프로토콜을 지정합니다. 기본 네트워크의 기본 캡슐화를 비활성화하고 라우팅 Pod 트래픽에 underlay를 사용하려면 NoOverlay 로 설정합니다.
spec.defaultNetwork.ovnKubernetesConfig.noOverlayConfig.outboundSNAT
기본 네트워크의 아웃바운드 SNAT를 지정합니다. Enabled 또는 Disabled 로 설정합니다. 활성화된 경우 Pod 서브넷 외부의 네트워크로의 아웃 바운드 Pod 트래픽이 필요한 경우 노드 IP에 NAT를 제공합니다. Disabled 인 경우 오버레이는 Pod IP를 직접 라우팅해야 합니다. 클러스터 내의 pod-to-pod 트래픽은 SNATed가 아닙니다. 노드 IP, Kubernetes API 및 클러스터 DNS로의 트래픽은 여전히 SNAT로 유지됩니다(해당하는 경우).
spec.defaultNetwork.ovnKubernetesConfig.noOverlayConfig.routing
기본 네트워크의 라우팅 모드를 지정합니다. FRRConfiguration 및 RouteAdvertisements CR을 외부 BGP에 제공할 때 노드 간 전체 메시 BGP 패브릭에 대해 Managed 로 설정하거나 Unmanaged 로 설정합니다.
spec.defaultNetwork.ovnKubernetesConfig.noOverlayConfig.bgpTopology
기본 네트워크의 BGP 토폴로지를 지정합니다. 라우팅이 Managed 로 설정된 경우 모든 노드가 다른 모든 노드와 BGP 라우터 및 피어를 실행하도록 FullMesh 로 설정합니다.
spec.defaultNetwork.ovnKubernetesConfig.noOverlayConfig.asNumber
기본 VRF의 BGP 자율 시스템(AS) 번호를 지정합니다. routing이 Managed 로 설정된 경우 기본 VRF에 대해 선택적 BGP AS 번호입니다. 생략하면 기본값은 64512 입니다.

기본 계층 3 클러스터 사용자 정의 네트워크에서 no-overlay 전송을 사용하는 경우 ClusterUserDefinedNetwork CR(사용자 정의 리소스)의 전체 사양 경로를 검토합니다.

no-overlay 모드의 ClusterUserDefinedNetwork CR의 예(관리되지 않은 라우팅)

apiVersion: k8s.ovn.org/v1
kind: ClusterUserDefinedNetwork
metadata:
  name: high-perf-network
  labels:
    network: high-perf-network
spec:
  namespaceSelector:
    matchLabels:
      app: performance-sensitive
  network:
    topology: Layer3
    layer3:
      role: Primary
      subnets:
      - cidr: 10.200.0.0/16
        hostSubnet: 24
    transport: "NoOverlay"
    noOverlayOptions:
      outboundSNAT: "Disabled"
      routing: "Unmanaged"

다음과 같습니다.

spec.namespaceSelector
워크로드를 기본 네트워크에 연결할 수 있는 네임스페이스의 라벨 선택기를 지정합니다.
spec.network.topology
네트워크 토폴로지를 지정합니다. Layer3 이어야 합니다.
spec.network.layer3.role
네트워크의 역할을 지정합니다. 기본 CUDN의 경우 기본 로 설정합니다.
spec.network.layer3.subnets
Pod 주소 공간 및 노드별 접두사 크기를 정의하는 cidr 및 hostSubnet 필드가 있는 오브젝트 목록을 지정합니다.
spec.network.transport
전송 프로토콜을 지정합니다. 이 CUDN에 대한 기본 캡슐화를 비활성화하려면 NoOverlay 로 설정하고 Pod 트래픽에 underlay 라우팅을 사용합니다.
spec.network.noOverlayOptions
이 네트워크의 라우팅 모드 및 SNAT 동작을 지정합니다. 전송이 NoOverlay 로 설정될 때 필요합니다.
spec.network.noOverlayOptions.routing
네트워크의 라우팅 모드를 지정합니다. CUDN의 경우 Unmanaged only로 설정합니다. 이 네트워크의 외부 BGP 피어 및 RouteAdvertisements CR을 관리합니다. no-overlay 관리 라우팅 모드는 기본 클러스터 네트워크에서만 지원됩니다. CUDN이 아닌 CNO(Cluster Network Operator) CR에서 no-overlay 관리 라우팅을 구성해야 합니다.
spec.network.noOverlayOptions.outboundSNAT
이 네트워크의 아웃바운드 SNAT를 지정합니다. NoOverlay 전송을 사용하는 기본 ClusterUserDefinedNetwork CR의 경우 underlay가 Pod IP를 직접 라우팅할 때 Disabled 로 설정합니다. 이 CR 유형에서 Enabled 값은 지원되지 않습니다. 기본 클러스터 네트워크에서 no-overlay와 함께 Enabled 또는 Disabled 를 사용하려면 CNO CR에서 spec.defaultNetwork.ovnKubernetesConfig.noOverlayConfig.outboundSNAT 를 구성합니다.

6.4.7. underlay 라우팅을 사용하는 Pod의 연결 문제 해결

연결 문제를 해결하고 no-overlay 연결 문제를 해결하려면 BGP 세션, 라우팅 알림 및 네트워크 상태를 확인할 수 있습니다.

사전 요구 사항

  • cluster-admin 권한이 있어야 합니다.
  • 기본 네트워크 또는 CNO( ClusterUserDefinedNetwork ) CR에 대해 no-overlay 모드를 구성했습니다.

절차

  1. 다음 명령을 실행하여 FRR-K8s Pod가 실행 중인지 확인합니다.

    $ oc get pods -n openshift-frr-k8s
  2. 기본 네트워크에 대해 no-overlay를 구성한 경우 다음 명령을 실행하여 CNO(Cluster Network Operator) CR을 확인합니다.

    $ oc get network.operator cluster -o yaml

    spec.defaultNetwork.ovnKubernetesConfig 에 예상 routeAdvertisements,transport, noOverlayConfig 값이 포함되어 있는지 확인합니다.

  3. 관리되지 않는 라우팅을 사용하는 경우 다음 명령을 실행하여 RouteAdvertisements 오브젝트를 확인합니다.

    $ oc describe routeadvertisements <routeadvertisements_name>

    & lt;routeadvertisements_name& gt;을 RouteAdvertisements 오브젝트의 이름으로 바꿉니다.

    status 섹션에 Accepted=True 가 출력에 표시되어야 합니다.

    참고

    관리 라우팅을 사용하는 경우 일반적으로 클러스터 내 전용 디자인에 대해 직접 RouteAdvertisements 를 생성하지 않습니다. Pod 연결이 실패하면 이 절차의 나머지 단계를 계속 진행합니다.

  4. no-overlay ClusterUserDefinedNetwork CR을 구성한 경우 다음 명령을 실행하여 해당 상태를 확인합니다.

    $ oc get clusteruserdefinednetwork <cudn_name> -o yaml

    & lt;cudn_name >을 CUDN CR 이름으로 바꿉니다.

  5. 다음 명령을 입력하여 OVN-Kubernetes 로그에서 BGP 관련 오류가 있는지 확인합니다.

    $ oc logs -n openshift-ovn-kubernetes -l app=ovnkube-node
  6. 다음 명령을 입력하여 노드 라우팅 테이블에 Pod 서브넷이 있는지 확인합니다.

    $ oc debug node/<node_name> -- chroot /host ip route

6.5. FRR-K8s 리소스 마이그레이션

OpenShift Container Platform 4.17 또는 이전 버전에서는 MetalLB Operator가 배포된 경우 FRR-K8s 사용자 정의 리소스를 마이그레이션해야 합니다. metallb-system 네임스페이스의 기존 FRRConfiguration 리소스를 업데이트된 아키텍처에 맞게 openshift-frr-k8s 네임스페이스로 이동해야 합니다. CLI를 사용하여 이러한 리소스를 마이그레이션하는 방법과 마이그레이션이 완료되었는지 확인하는 방법을 알아봅니다.

OpenShift Container Platform 4.17 및 이전 릴리스의 metallb-system 네임스페이스에 있는 모든 사용자가 생성한 FRR-K8s CR(사용자 정의 리소스)은 openshift-frr-k8s 네임스페이스로 마이그레이션해야 합니다. 클러스터 관리자는 CLI를 사용하여 FRR-K8s 사용자 정의 리소스를 openshift-frr-k8s 네임스페이스로 마이그레이션할 수 있습니다.

6.5.1. FRR-K8s 리소스 마이그레이션

FRR-K8s FRRConfiguration 사용자 정의 리소스를 metallb-system 네임스페이스에서 openshift-frr-k8s 네임스페이스로 마이그레이션할 수 있습니다.

Metal LB Operator가 배포된 이전 버전의 OpenShift Container Platform에서 업그레이드할 때 사용자 정의 FRRConfiguration 구성을 metallb-system 네임스페이스에서 openshift-frr-k8s 네임스페이스로 수동으로 마이그레이션해야 합니다.

사전 요구 사항

  • OpenShift CLI(oc)가 설치되어 있습니다.
  • cluster-admin 역할의 사용자로 클러스터에 로그인되어 있습니다.

절차

  1. openshift-frr-k8s 네임스페이스를 생성하려면 다음 명령을 입력합니다.

    $ oc create namespace openshift-frr-k8s
  2. 마이그레이션을 자동화하려면 다음 콘텐츠를 사용하여 migrate.sh 라는 쉘 스크립트를 생성합니다.

    #!/bin/bash
    OLD_NAMESPACE="metallb-system"
    NEW_NAMESPACE="openshift-frr-k8s"
    FILTER_OUT="metallb-"
    oc get frrconfigurations.frrk8s.metallb.io -n "${OLD_NAMESPACE}" -o json |\
      jq -r '.items[] | select(.metadata.name | test("'"${FILTER_OUT}"'") | not)' |\
      jq -r '.metadata.namespace = "'"${NEW_NAMESPACE}"'"' |\
      oc create -f -
  3. 마이그레이션을 실행하려면 다음 명령을 실행합니다.

    $ bash migrate.sh

검증

  • 마이그레이션이 성공했는지 확인하려면 다음 명령을 실행합니다.

    $ oc get frrconfigurations.frrk8s.metallb.io -n openshift-frr-k8s

마이그레이션이 완료되면 metallb-system 네임스페이스에서 FRRConfiguration 사용자 정의 리소스를 제거할 수 있습니다.

Red Hat logoGithubRedditYoutubeTwitter

자세한 정보

평가판, 구매 및 판매

커뮤니티

Red Hat 소개

Red Hat은 기업이 핵심 데이터 센터에서 네트워크 에지에 이르기까지 플랫폼과 환경 전반에서 더 쉽게 작업할 수 있도록 강화된 솔루션을 제공합니다.

보다 포괄적 수용을 위한 오픈 소스 용어 교체

Red Hat은 코드, 문서, 웹 속성에서 문제가 있는 언어를 교체하기 위해 최선을 다하고 있습니다. 자세한 내용은 다음을 참조하세요.Red Hat 블로그.

Red Hat 문서 정보

Legal Notice

Theme

© 2026 Red Hat
맨 위로 이동