네트워킹

프로세스

1. openshift-install 명령으로 생성된 가상 프라이빗 클라우드(VPC)에 SSH로 액세스할 수 있는 보안 그룹을 만듭니다.
2. 설치 관리자가 생성한 퍼블릭 서브넷 중 하나에 Amazon EC2 인스턴스를 생성합니다.

3. 생성한 Amazon EC2 인스턴스와 퍼블릭 IP 주소를 연결합니다.

   OpenShift Container Platform 설치와는 달리, 생성한 Amazon EC2 인스턴스를 SSH 키 쌍과 연결해야 합니다. 이 인스턴스에서 사용되는 운영 체제는 중요하지 않습니다. 그저 인터넷을 OpenShift Container Platform 클러스터의 VPC에 연결하는 SSH 베스천의 역할을 수행하기 때문입니다. 사용하는 AMI(Amazon 머신 이미지)는 중요합니다. 예를 들어, RHCOS(Red Hat Enterprise Linux CoreOS)를 사용하면 설치 프로그램과 마찬가지로 Ignition을 통해 키를 제공할 수 있습니다.

4. Amazon EC2 인스턴스를 프로비저닝한 후 SSH로 연결할 수 있는 경우 OpenShift Container Platform 설치와 관련된 SSH 키를 추가해야 합니다. 이 키는 베스천 인스턴스의 키와 다를 수 있지만 반드시 달라야 하는 것은 아닙니다.

   참고

   SSH 직접 액세스는 재해 복구 시에만 권장됩니다. Kubernetes API가 응답할 때는 권한 있는 Pod를 대신 실행합니다.

5. oc get nodes를 실행하고 출력을 확인한 후 마스터 노드 중 하나를 선택합니다. 호스트 이름은 ip-10-0-1-163.ec2.internal과 유사합니다.

6. Amazon EC2에 수동으로 배포한 베스천 SSH 호스트에서 해당 컨트롤 클레인 호스트 (마스터 호스트라고도함)에 SSH로 연결합니다. 설치 중 지정한 것과 동일한 SSH 키를 사용해야 합니다.

   $ ssh -i <ssh-key-path> core@<master-hostname>

   Copy to Clipboard Toggle word wrap

1. 다음 명령을 실행하여 배포 상태를 확인합니다.

   $ oc get -n openshift-network-operator deployment/network-operator

   Copy to Clipboard Toggle word wrap

   출력 예

   NAME               READY   UP-TO-DATE   AVAILABLE   AGE
   network-operator   1/1     1            1           56m

   Copy to Clipboard Toggle word wrap

2. 다음 명령을 실행하여 Cluster Network Operator의 상태를 확인합니다.

   $ oc get clusteroperator/network

   Copy to Clipboard Toggle word wrap

   출력 예

   NAME      VERSION   AVAILABLE   PROGRESSING   DEGRADED   SINCE
   network   4.5.4     True        False         False      50m

   Copy to Clipboard Toggle word wrap

   다음 필드는 Operator 상태에 대한 정보를 제공합니다. AVAILABLE,PROGRESSING 및 DEGRADED. Cluster Network Operator가 사용 가능한 상태 조건을 보고하는 경우 AVAILABLE 필드는 True로 설정됩니다.

1. oc get 명령을 사용하여 배포 상태를 확인합니다.

   $ oc get -n openshift-dns-operator deployment/dns-operator

   Copy to Clipboard Toggle word wrap

   출력 예

   NAME           READY     UP-TO-DATE   AVAILABLE   AGE
   dns-operator   1/1       1            1           23h

   Copy to Clipboard Toggle word wrap

2. oc get 명령을 사용하여 DNS Operator의 상태를 확인합니다.

   $ oc get clusteroperator/dns

   Copy to Clipboard Toggle word wrap

   출력 예

   NAME      VERSION     AVAILABLE   PROGRESSING   DEGRADED   SINCE
   dns       4.1.0-0.11  True        False         False      92m

   Copy to Clipboard Toggle word wrap

   AVAILABLE,PROGRESSING 및 DEGRADED 에서는 Operator 상태에 대한 정보를 제공합니다. AVAILABLE은 CoreDNS 데몬 세트에서 1개 이상의 포드가 Available 상태 조건을 보고할 때 True입니다.

프로세스

1. oc describe 명령을 사용하여 기본 dns를 확인합니다.

   $ oc describe dns.operator/default

   Copy to Clipboard Toggle word wrap

   출력 예

   Name:         default
   Namespace:
   Labels:       <none>
   Annotations:  <none>
   API Version:  operator.openshift.io/v1
   Kind:         DNS
   ...
   Status:
     Cluster Domain:  cluster.local 

   1

   
     Cluster IP:      172.30.0.10 

   2

   
   ...

   Copy to Clipboard Toggle word wrap

   1

   Cluster Domain 필드는 정규화된 pod 및 service 도메인 이름을 구성하는 데 사용되는 기본 DNS 도메인입니다.

   2

   Cluster IP는 이름을 확인하기 위한 주소 Pod 쿼리입니다. IP는 service CIDR 범위에서 10번째 주소로 정의됩니다.

2. 클러스터의 service CIDR을 찾으려면 oc get 명령을 사용합니다.

   $ oc get networks.config/cluster -o jsonpath='{$.status.serviceNetwork}'

   Copy to Clipboard Toggle word wrap

프로세스

1. 이름이 default인 DNS Operator 오브젝트를 수정합니다.

   $ oc edit dns.operator/default

   Copy to Clipboard Toggle word wrap

   이를 통해 Operator는 Server 기반의 추가 서버 구성 블록으로 dns-default라는 ConfigMap을 생성 및 업데이트할 수 있습니다. 서버에 쿼리와 일치하는 영역이 없는 경우 이름 확인은 /etc/resolv.conf에 지정된 네임 서버로 대체됩니다.

   샘플 DNS

   apiVersion: operator.openshift.io/v1
   kind: DNS
   metadata:
     name: default
   spec:
     servers:
     - name: foo-server 

   1

   
       zones: 

   2

   
         - example.com
       forwardPlugin:
         upstreams: 

   3

   
           - 1.1.1.1
           - 2.2.2.2:5353
     - name: bar-server
       zones:
         - bar.com
         - example.com
       forwardPlugin:
         upstreams:
           - 3.3.3.3
           - 4.4.4.4:5454

   Copy to Clipboard Toggle word wrap

   1

   name은 rfc6335 서비스 이름 구문을 준수해야 합니다.

   2

   zones는 rfc1123의 하위 도메인 정의를 준수해야 합니다. 클러스터 도메인에 해당하는 cluster.local은 영역에 유효하지 않은 하위 도메인입니다.

   3

   forwardPlugin당 최대 15개의 업스트림이 허용됩니다.

   참고

   servers 가 정의되지 않았거나 유효하지 않은 경우 ConfigMap에는 기본 서버만 포함됩니다.

2. ConfigMap을 확인합니다.

   $ oc get configmap/dns-default -n openshift-dns -o yaml

   Copy to Clipboard Toggle word wrap

   이전 샘플 DNS를 기반으로 하는 샘플 DNS ConfigMap

   apiVersion: v1
   data:
     Corefile: |
       example.com:5353 {
           forward . 1.1.1.1 2.2.2.2:5353
       }
       bar.com:5353 example.com:5353 {
           forward . 3.3.3.3 4.4.4.4:5454 

   1

   
       }
       .:5353 {
           errors
           health
           kubernetes cluster.local in-addr.arpa ip6.arpa {
               pods insecure
               upstream
               fallthrough in-addr.arpa ip6.arpa
           }
           prometheus :9153
           forward . /etc/resolv.conf {
               policy sequential
           }
           cache 30
           reload
       }
   kind: ConfigMap
   metadata:
     labels:
       dns.operator.openshift.io/owning-dns: default
     name: dns-default
     namespace: openshift-dns

   Copy to Clipboard Toggle word wrap

   1

   forwardPlugin을 변경하면 CoreDNS 데몬 세트의 롤링 업데이트가 트리거됩니다.

프로세스

1. 노드 포트 범위를 확장하려면 다음 명령을 입력합니다. <port>를 새 범위에서 가장 큰 포트 번호로 변경합니다.

   $ oc patch network.config.openshift.io cluster --type=merge -p \
     '{
       "spec":
         { "serviceNodePortRange": "30000-<port>" }
     }'

   Copy to Clipboard Toggle word wrap

   출력 예

   network.config.openshift.io/cluster patched

   Copy to Clipboard Toggle word wrap

2. 구성이 활성 상태인지 확인하려면 다음 명령을 입력합니다. 업데이트가 적용되려면 몇 분 정도 걸릴 수 있습니다.

   $ oc get configmaps -n openshift-kube-apiserver config \
     -o jsonpath="{.data['config\.yaml']}" | \
     grep -Eo '"service-node-port-range":["[[:digit:]]+-[[:digit:]]+"]'

   Copy to Clipboard Toggle word wrap

   출력 예

   "service-node-port-range":["30000-33000"]

   Copy to Clipboard Toggle word wrap

프로세스

1. 다음 YAML 정의가 포함된 load-sctp-module.yaml 파일을 생성합니다.

   apiVersion: machineconfiguration.openshift.io/v1
   kind: MachineConfig
   metadata:
     name: load-sctp-module
     labels:
       machineconfiguration.openshift.io/role: worker
   spec:
     config:
       ignition:
         version: 3.1.0
       storage:
         files:
           - path: /etc/modprobe.d/sctp-blacklist.conf
             mode: 0644
             overwrite: true
             contents:
               source: data:,
           - path: /etc/modules-load.d/sctp-load.conf
             mode: 0644
             overwrite: true
             contents:
               source: data:,sctp

   Copy to Clipboard Toggle word wrap

2. MachineConfig 오브젝트를 생성하려면 다음 명령을 입력합니다.

   $ oc create -f load-sctp-module.yaml

   Copy to Clipboard Toggle word wrap

3. 선택 사항: MachineConfig Operator가 구성 변경 사항을 적용하는 동안 노드의 상태를 보려면 다음 명령을 입력합니다. 노드 상태가 Ready로 전환되면 구성 업데이트가 적용됩니다.

   $ oc get nodes

   Copy to Clipboard Toggle word wrap

프로세스

1. SCTP 리스너를 시작하는 포드를 생성합니다.

   1. 다음 YAML로 pod를 정의하는 sctp-server.yaml 파일을 생성합니다.

      apiVersion: v1
      kind: Pod
      metadata:
        name: sctpserver
        labels:
          app: sctpserver
      spec:
        containers:
          - name: sctpserver
            image: registry.access.redhat.com/ubi8/ubi
            command: ["/bin/sh", "-c"]
            args:
              ["dnf install -y nc && sleep inf"]
            ports:
              - containerPort: 30102
                name: sctpserver
                protocol: SCTP

      Copy to Clipboard Toggle word wrap

   2. 다음 명령을 입력하여 pod를 생성합니다.

      $ oc create -f sctp-server.yaml

      Copy to Clipboard Toggle word wrap

2. SCTP 리스너 pod에 대한 서비스를 생성합니다.

   1. 다음 YAML을 사용하여 서비스를 정의하는 sctp-service.yaml 파일을 생성합니다.

      apiVersion: v1
      kind: Service
      metadata:
        name: sctpservice
        labels:
          app: sctpserver
      spec:
        type: NodePort
        selector:
          app: sctpserver
        ports:
          - name: sctpserver
            protocol: SCTP
            port: 30102
            targetPort: 30102

      Copy to Clipboard Toggle word wrap

   2. 서비스를 생성하려면 다음 명령을 입력합니다.

      $ oc create -f sctp-service.yaml

      Copy to Clipboard Toggle word wrap

3. SCTP 클라이언트에 대한 pod를 생성합니다.

   1. 다음 YAML을 사용하여 sctp-client.yaml 파일을 만듭니다.

      apiVersion: v1
      kind: Pod
      metadata:
        name: sctpclient
        labels:
          app: sctpclient
      spec:
        containers:
          - name: sctpclient
            image: registry.access.redhat.com/ubi8/ubi
            command: ["/bin/sh", "-c"]
            args:
              ["dnf install -y nc && sleep inf"]

      Copy to Clipboard Toggle word wrap

   2. Pod 오브젝트를 생성하려면 다음 명령을 입력합니다.

      $ oc apply -f sctp-client.yaml

      Copy to Clipboard Toggle word wrap

4. 서버에서 SCTP 리스너를 실행합니다.

   1. 서버 Pod에 연결하려면 다음 명령을 입력합니다.

      $ oc rsh sctpserver

      Copy to Clipboard Toggle word wrap

   2. SCTP 리스너를 시작하려면 다음 명령을 입력합니다.

      $ nc -l 30102 --sctp

      Copy to Clipboard Toggle word wrap

5. 서버의 SCTP 리스너에 연결합니다.

   1. 터미널 프로그램에서 새 터미널 창 또는 탭을 엽니다.

   2. sctpservice 서비스의 IP 주소를 얻습니다. 다음 명령을 실행합니다.

      $ oc get services sctpservice -o go-template='{{.spec.clusterIP}}{{"\n"}}'

      Copy to Clipboard Toggle word wrap

   3. 클라이언트 Pod에 연결하려면 다음 명령을 입력합니다.

      $ oc rsh sctpclient

      Copy to Clipboard Toggle word wrap

   4. SCTP 클라이언트를 시작하려면 다음 명령을 입력합니다. <cluster_IP>를 sctpservice 서비스의 클러스터 IP 주소로 변경합니다.

      # nc <cluster_IP> 30102 --sctp

      Copy to Clipboard Toggle word wrap

프로세스

1. 다음 PtpConfig CR을 생성한 다음 YAML을 <name>-ptp-config.yaml 파일에 저장합니다. <name>을 이 구성의 이름으로 바꿉니다.

   apiVersion: ptp.openshift.io/v1
   kind: PtpConfig
   metadata:
     name: <name> 

   1

   
     namespace: openshift-ptp 

   2

   
   spec:
     profile: 

   3

   
     - name: "profile1" 

   4

   
       interface: "ens787f1" 

   5

   
       ptp4lOpts: "-s -2" 

   6

   
       phc2sysOpts: "-a -r" 

   7

   
     recommend: 

   8

   
     - profile: "profile1" 

   9

   
       priority: 10 

   10

   
       match: 

   11

   
       - nodeLabel: "node-role.kubernetes.io/worker" 

   12

   
         nodeName: "dev-worker-0" 

   13

   Copy to Clipboard Toggle word wrap

   1

   PtpConfig CR의 이름을 지정합니다.

   2

   PTP Operator가 설치된 네임스페이스를 지정합니다.

   3

   하나 이상의 profile 오브젝트의 배열을 지정합니다.

   4

   프로필 오브젝트를 고유하게 식별하는 데 사용되는 프로필 오브젝트의 이름을 지정합니다.

   5

   ptp4l 서비스에서 사용할 네트워크 인터페이스 이름을 지정합니다(예: ens787f1).

   6

   ptp4l 서비스에 대한 시스템 구성 옵션을 지정합니다(예: -s -2). 인터페이스 이름 -i <interface> 및 서비스 구성 파일 -f /etc/ptp4l.conf는 자동으로 추가되므로 포함하지 않아야 합니다.

   7

   phc2sys 서비스에 대한 시스템 구성 옵션을 지정합니다(예: -a -r).

   8

   profile이 노드에 적용되는 방법에 대한 규칙을 정의하는 하나 이상의 recommend 오브젝트 배열을 지정합니다.

   9

   profile 섹션에 정의된 profile 오브젝트 이름을 지정합니다.

   10

   0에서 99 사이의 정수 값으로 priority를 지정합니다. 숫자가 클수록 우선순위가 낮으므로 우선순위 99는 우선순위 10보다 낮습니다. match 필드에 정의된 규칙에 따라 노드를 여러 프로필과 일치시킬 수 있는 경우 우선순위가 높은 프로필이 해당 노드에 적용됩니다.

   11

   nodeLabel 또는 nodeName으로 일치 규칙을 지정합니다.

   12

   노드 오브젝트에서 node.Labels의 key로 nodeLabel을 지정합니다.

   13

   노드 오브젝트에서 node.Name으로 nodeName을 지정합니다.

2. 다음 명령을 실행하여 CR을 생성합니다.

   $ oc create -f <filename> 

   1

   Copy to Clipboard Toggle word wrap

   1

   <filename>을 이전 단계에서 생성한 파일 이름으로 바꿉니다.

3. 선택 사항: PtpConfig 프로필이 nodeLabel 또는 node Name 과 일치하는 노드에 적용되는지 확인합니다.

   $ oc get pods -n openshift-ptp -o wide

   Copy to Clipboard Toggle word wrap

   출력 예

   NAME                            READY   STATUS    RESTARTS   AGE   IP               NODE           NOMINATED NODE   READINESS GATES
   linuxptp-daemon-4xkbb           1/1     Running   0          43m   192.168.111.15   dev-worker-0   <none>           <none>
   linuxptp-daemon-tdspf           1/1     Running   0          43m   192.168.111.11   dev-master-0   <none>           <none>
   ptp-operator-657bbb64c8-2f8sj   1/1     Running   0          43m   10.128.0.116     dev-master-0   <none>           <none>
   
   $ oc logs linuxptp-daemon-4xkbb -n openshift-ptp
   I1115 09:41:17.117596 4143292 daemon.go:107] in applyNodePTPProfile
   I1115 09:41:17.117604 4143292 daemon.go:109] updating NodePTPProfile to:
   I1115 09:41:17.117607 4143292 daemon.go:110] ------------------------------------
   I1115 09:41:17.117612 4143292 daemon.go:102] Profile Name: profile1 

   1

   
   I1115 09:41:17.117616 4143292 daemon.go:102] Interface: ens787f1    

   2

   
   I1115 09:41:17.117620 4143292 daemon.go:102] Ptp4lOpts: -s -2       

   3

   
   I1115 09:41:17.117623 4143292 daemon.go:102] Phc2sysOpts: -a -r     

   4

   
   I1115 09:41:17.117626 4143292 daemon.go:116] ------------------------------------
   I1115 09:41:18.117934 4143292 daemon.go:186] Starting phc2sys...
   I1115 09:41:18.117985 4143292 daemon.go:187] phc2sys cmd: &{Path:/usr/sbin/phc2sys Args:[/usr/sbin/phc2sys -a -r] Env:[] Dir: Stdin:<nil> Stdout:<nil> Stderr:<nil> ExtraFiles:[] SysProcAttr:<nil> Process:<nil> ProcessState:<nil> ctx:<nil> lookPathErr:<nil> finished:false childFiles:[] closeAfterStart:[] closeAfterWait:[] goroutine:[] errch:<nil> waitDone:<nil>}
   I1115 09:41:19.118175 4143292 daemon.go:186] Starting ptp4l...
   I1115 09:41:19.118209 4143292 daemon.go:187] ptp4l cmd: &{Path:/usr/sbin/ptp4l Args:[/usr/sbin/ptp4l -m -f /etc/ptp4l.conf -i ens787f1 -s -2] Env:[] Dir: Stdin:<nil> Stdout:<nil> Stderr:<nil> ExtraFiles:[] SysProcAttr:<nil> Process:<nil> ProcessState:<nil> ctx:<nil> lookPathErr:<nil> finished:false childFiles:[] closeAfterStart:[] closeAfterWait:[] goroutine:[] errch:<nil> waitDone:<nil>}
   ptp4l[102189.864]: selected /dev/ptp5 as PTP clock
   ptp4l[102189.886]: port 1: INITIALIZING to LISTENING on INIT_COMPLETE
   ptp4l[102189.886]: port 0: INITIALIZING to LISTENING on INIT_COMPLETE

   Copy to Clipboard Toggle word wrap

   1

   Profile Name은 dev-worker-0 노드에 적용되는 이름입니다.

   2

   Interface는 profile1 인터페이스 필드에 지정된 PTP 장치입니다. ptp4l 서비스는 이 인터페이스에서 실행됩니다.

   3

   Ptp4lOpts는 profile1 Ptp4lOpts 필드에 지정된 ptp4l sysconfig 옵션입니다.

   4

   Phc2sysOpts는 profile1 Phc2sysOpts 필드에 지정된 phc2sys sysconfig 옵션입니다.