3.3. CLI와 함께 피어 Pod를 사용하여 OpenShift 샌드박스 컨테이너 워크로드 배포

프로세스

1. secret 오브젝트에 필요한 매개변수 값을 수집합니다. 각 값을 적어 둡니다.

   1. 인스턴스 ID를 검색합니다.

      $ INSTANCE_ID=$(oc get nodes -l 'node-role.kubernetes.io/worker' -o jsonpath='{.items[0].spec.providerID}' | sed 's#[^ ]*/##g')

      이 값은 보안 오브젝트 자체에 필요하지 않지만 secret 오브젝트의 다른 값을 검색하는 데 사용됩니다.

   2. AWS 리전을 검색합니다.

      $ AWS_REGION=$(oc get infrastructure/cluster -o jsonpath='{.status.platformStatus.aws.region}') && echo "AWS_REGION: \"$AWS_REGION\""

   3. AWS 서브넷 ID를 검색합니다.

      $ AWS_SUBNET_ID=$(aws ec2 describe-instances --instance-ids ${INSTANCE_ID} --query 'Reservations[*].Instances[*].SubnetId' --region ${AWS_REGION} --output text) && echo "AWS_SUBNET_ID: \"$AWS_SUBNET_ID\""

   4. AWS VPC ID를 검색합니다.

      $ AWS_VPC_ID=$(aws ec2 describe-instances --instance-ids ${INSTANCE_ID} --query 'Reservations[*].Instances[*].VpcId' --region ${AWS_REGION} --output text) && echo "AWS_VPC_ID: \"$AWS_VPC_ID\""

   5. AWS 보안 그룹 ID를 검색합니다.

      $ AWS_SG_IDS=$(aws ec2 describe-instances --instance-ids ${INSTANCE_ID} --query 'Reservations[*].Instances[*].SecurityGroups[*].GroupId' --region $AWS_REGION --output json | jq -r '.[][][]' | paste -sd ",") && echo "AWS_SG_IDS: \"$AWS_SG_IDS\""

2. 다음 매니페스트를 사용하여 YAML 파일을 생성합니다.

   apiVersion: v1
   kind: Secret
   metadata:
     name: peer-pods-secret
     namespace: openshift-sandboxed-containers-operator
   type: Opaque
   stringData:
     AWS_ACCESS_KEY_ID: "<enter value>" 1
     AWS_SECRET_ACCESS_KEY: "<enter value>" 2
     AWS_REGION: "<enter value>" 3
     AWS_SUBNET_ID: "<enter value>" 4
     AWS_VPC_ID: "<enter value>" 5
     AWS_SG_IDS: "<enter value>" 6

   1

   시작하기 전에 준비한 AWS_ACCESS_KEY_ID 값을 입력합니다.

   2

   시작하기 전에 준비한 AWS_SECRET_ACCESS_KEY 값을 입력합니다.

   3

   검색한 AWS_REGION 값을 입력합니다.

   4

   검색한 AWS_SUBNET_ID 값을 입력합니다.

   5

   검색한 AWS_VPC_ID 값을 입력합니다.

   6

   검색한 AWS_SG_IDS 값을 입력합니다.

3. 보안 오브젝트를 적용합니다.

   $ oc apply -f peer-pods-secret.yaml

프로세스

1. 다음 매니페스트를 사용하여 YAML 파일을 생성합니다.

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: peer-pods-cm
     namespace: openshift-sandboxed-containers-operator
   data:
     CLOUD_PROVIDER: "aws"
     VXLAN_PORT: "9000"
     PODVM_INSTANCE_TYPE: "t3.medium" 1
     PODVM_INSTANCE_TYPES: "t2.small,t2.medium,t3.large" 2
     PROXY_TIMEOUT: "5m"

   1

   유형이 워크로드에 정의되지 않은 경우 사용되는 기본 인스턴스 유형을 정의합니다.

   2

   Pod를 생성할 때 지정할 수 있는 모든 인스턴스 유형을 나열합니다. 이를 통해 더 적은 메모리와 CPU가 필요한 워크로드에 대해 더 작은 인스턴스를 정의하거나 더 큰 워크로드에 대해 더 큰 인스턴스를 정의할 수 있습니다.

2. ConfigMap 을 적용합니다.

   $ oc apply -f peer-pods-cm.yaml

프로세스

1. Azure 서브스크립션 ID를 검색합니다.

   $ AZURE_SUBSCRIPTION_ID=$(az account list --query "[?isDefault].id" -o tsv) && echo "AZURE_SUBSCRIPTION_ID: \"$AZURE_SUBSCRIPTION_ID\""

2. RBAC 콘텐츠를 생성합니다. 이렇게 하면 클라이언트 ID, 클라이언트 시크릿, 테넌트 ID가 생성됩니다.

   $ az ad sp create-for-rbac --role Contributor --scopes /subscriptions/$AZURE_SUBSCRIPTION_ID --query "{ client_id: appId, client_secret: password, tenant_id: tenant }

   다음 출력이 표시됩니다.

   {
     "client_id": `AZURE_CLIENT_ID`,
     "client_secret": `AZURE_CLIENT_SECRET`,
     "tenant_id": `AZURE_TENANT_ID`
   }

3. 보안 오브젝트에 사용할 RBAC 출력에 값을 저장합니다.

4. secret 오브젝트의 추가 매개변수 값을 수집합니다. 각 값을 적어 둡니다.

   1. 리소스 그룹을 검색합니다.

      $ AZURE_RESOURCE_GROUP=$(oc get infrastructure/cluster -o jsonpath='{.status.platformStatus.azure.resourceGroupName}') && echo "AZURE_RESOURCE_GROUP: \"$AZURE_RESOURCE_GROUP\""

   2. Azure 리전을 검색합니다.

      $ AZURE_REGION=$(az group show --resource-group ${AZURE_RESOURCE_GROUP} --query "{Location:location}" --output tsv) && echo "AZURE_REGION: \"$AZURE_REGION\""

5. 다음 매니페스트를 사용하여 YAML 파일을 생성합니다.

   apiVersion: v1
   kind: Secret
   metadata:
     name: peer-pods-secret
     namespace: openshift-sandboxed-containers-operator
   type: Opaque
   stringData:
     AZURE_CLIENT_ID: "<enter value>" 1
     AZURE_CLIENT_SECRET: "<enter value>" 2
     AZURE_TENANT_ID: "<enter value>" 3
     AZURE_SUBSCRIPTION_ID: "<enter value>" 4
     AZURE_REGION: "<enter value>" 5
     AZURE_RESOURCE_GROUP: "<enter value>" 6

   1

   RBAC 파일에 생성한 AZURE_CLIENT_ID 값을 입력합니다.

   2

   RBAC 파일에 생성한 AZURE_CLIENT_SECRET 값을 입력합니다.

   3

   RBAC 파일에 생성한 AZURE_TENANT_ID 값을 입력합니다.

   4

   검색한 AZURE_SUBSCRIPTION_ID 값을 입력합니다.

   5

   검색한 AZURE_REGION 값을 입력합니다.

   6

   검색한 AZURE_RESOURCE_GROUP 값을 입력합니다.

6. 보안 오브젝트를 적용합니다.

   $ oc apply -f peer-pods-secret.yaml

프로세스

1. Azure 피어 포드 ConfigMap 의 구성 값을 수집합니다. 각 값을 적어 둡니다.

   1. Azure VNet 이름을 검색합니다.

      $ AZURE_VNET_NAME=$(az network vnet list --resource-group ${AZURE_RESOURCE_GROUP} --query "[].{Name:name}" --output tsv)

      이 값은 ConfigMap 에 필요하지 않지만 Azure 서브넷 ID를 검색하는 데 사용됩니다.

   2. Azure 서브넷 ID를 검색합니다.

      $ AZURE_SUBNET_ID=$(az network vnet subnet list --resource-group ${AZURE_RESOURCE_GROUP} --vnet-name $AZURE_VNET_NAME --query "[].{Id:id} | [? contains(Id, 'worker')]" --output tsv) && echo "AZURE_SUBNET_ID: \"$AZURE_SUBNET_ID\""

   3. Azure 네트워크 보안 그룹(NSG) ID를 검색합니다.

      $ AZURE_NSG_ID=$(az network nsg list --resource-group ${AZURE_RESOURCE_GROUP} --query "[].{Id:id}" --output tsv) && echo "AZURE_NSG_ID: \"$AZURE_NSG_ID\""

2. 다음 매니페스트를 사용하여 YAML 파일을 생성합니다.

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: peer-pods-cm
     namespace: openshift-sandboxed-containers-operator
   data:
     CLOUD_PROVIDER: "azure"
     VXLAN_PORT: "9000"
     AZURE_INSTANCE_SIZE: "Standard_B2als_v2" 1
     AZURE_INSTANCE_SIZES: "Standard_B2als_v2,Standard_D2as_v5,Standard_D4as_v5,Standard_D2ads_v5" 2
     AZURE_SUBNET_ID: "<enter value>" 3
     AZURE_NSG_ID: "<enter value>" 4
     PROXY_TIMEOUT: "5m"
     DISABLECVM: "true"

   1

   워크로드에서 인스턴스가 정의되지 않은 경우 사용되는 기본 인스턴스 크기를 정의합니다.

   2

   Pod를 생성할 때 지정할 수 있는 모든 인스턴스 크기를 나열합니다. 이를 통해 더 적은 메모리와 CPU가 필요한 워크로드에 대해 더 작은 인스턴스를 정의하거나 더 큰 워크로드에 대해 더 큰 인스턴스를 정의할 수 있습니다.

   3

   검색한 AZURE_SUBNET_ID 값을 입력합니다.

   4

   검색한 AZURE_NSG_ID 값을 입력합니다.

3. ConfigMap 을 적용합니다.

   $ oc apply -f peer-pods-cm.yaml

프로세스

1. SSH 키를 생성합니다.

   $ ssh-keygen -f ./id_rsa -N ""

2. SSH 시크릿 오브젝트를 생성합니다.

   $ oc create secret generic ssh-key-secret -n openshift-sandboxed-containers-operator --from-file=id_rsa.pub=./id_rsa.pub --from-file=id_rsa=./id_rsa

프로세스

1. IBM Z KVM 호스트에 로그인하고 libvirt에서 스토리지 관리를 위해 사용할 쉘 변수를 설정합니다.

   1. 다음 명령을 실행하여 libvirt 풀의 이름을 설정합니다.

      $ export LIBVIRT_POOL=<name_of_libvirt_pool_to_create>

   2. 다음 명령을 실행하여 libvirt 풀의 이름을 설정합니다.

      $ export LIBVIRT_VOL_NAME=<name_of_libvirt_volume_to_create>

   3. 다음 명령을 실행하여 기본 스토리지 풀 위치의 경로를 설정합니다.

      $ export LIBVIRT_POOL_DIRECTORY=<name_of_target_directory> 1

      1

      libvirt에 읽기 및 쓰기 액세스 권한이 있는지 확인하려면 libvirt의 스토리지 디렉터리의 하위 디렉터리를 사용합니다. 기본값은 /var/lib/libvirt/images/ 입니다.

2. 다음 명령을 실행하여 libvirt 풀을 생성합니다.

   $ virsh pool-define-as $LIBVIRT_POOL --type dir --target "$LIBVIRT_POOL_DIRECTORY"

3. 다음 명령을 실행하여 libvirt 풀을 시작합니다.

   $ virsh pool-start $LIBVIRT_POOL

4. 다음 명령을 실행하여 풀에 대한 libvirt 볼륨을 만듭니다.

   $ virsh -c qemu:///system \
     vol-create-as --pool $LIBVIRT_POOL \
     --name $LIBVIRT_VOL_NAME \
     --capacity 20G \
     --allocation 2G \
     --prealloc-metadata \
     --format qcow2

프로세스

1. 시스템의 RHEL ORG_ID 및 ACTIVATION_KEY 쉘 변수를 설정합니다.

   1. 서브스크립션된 RHEL 시스템을 사용하는 경우 다음 명령을 실행하여 쉘 환경 변수를 조직 ID를 보유한 파일로 설정하고 Red Hat Subscription Management(RHSM)의 활성화 키를 설정합니다.

      $ export ORG_ID=$(cat ~/.rh_subscription/orgid)
      
      $ export ACTIVATION_KEY=$(cat ~/.rh_subscription/activation_key)

   2. 서브스크립션이 해제된 RHEL 시스템을 사용하는 경우 다음 명령을 실행하여 적절한 서브스크립션 값을 설정합니다.

      $ export ORG_ID=<RHEL_ORGID_VALUE>
      
      $ export ACTIVATION_KEY=<RHEL_ACVTIVATION_KEY>

2. IBM Z 시스템에 로그인하고 다음 단계를 수행합니다.

   1. Red Hat 고객 포털에서 libvirt 올바른 액세스 권한을 부여하려면 s390x RHEL KVM 게스트 이미지를 libvirt 스토리지 디렉터리로 다운로드합니다. 기본 디렉터리는 /var/lib/libvirt/images 입니다. 이미지는 관련 바이너리를 포함할 피어 Pod VM 이미지를 생성하는 데 사용됩니다.

   2. 다음 명령을 실행하여 다운로드한 이미지의 IMAGE_URL 쉘 환경 변수를 설정합니다.

      $ export IMAGE_URL=<location_of_downloaded_KVM_guest_image> 1

      1

      이전 단계에서 다운로드한 KVM 게스트 이미지의 경로를 입력합니다.

   3. 다음 명령을 실행하여 게스트 KVM 이미지를 등록합니다.

      $ export REGISTER_CMD="subscription-manager register --org=${ORG_ID} \
        --activationkey=${ACTIVATION_KEY}"

   4. 다음 명령을 실행하여 게스트 KVM 이미지를 사용자 지정합니다.

      $ virt-customize -v -x -a ${IMAGE_URL} --run-command "${REGISTER_CMD}"

   5. 다음 명령을 실행하여 이미지의 체크섬을 설정합니다.

      $ export IMAGE_CHECKSUM=$(sha256sum ${IMAGE_URL} | awk '{ print $1 }')

프로세스

1. 다음 매니페스트를 사용하여 YAML 파일 peer-pods-secret.yaml 을 생성합니다.

   apiVersion: v1
   kind: Secret
   metadata:
     name: peer-pods-secret
     namespace: openshift-sandboxed-containers-operator
   type: Opaque
   stringData:
     CLOUD_PROVIDER: "libvirt" 1
     LIBVIRT_URI: "<libvirt_gateway_uri>" 2
     LIBVIRT_POOL: "<libvirt_pool>" 3
     LIBVIRT_VOL_NAME: "<libvirt_volume>" 4

   1

   libvirt 를 클라우드 공급자로 입력합니다.

   2

   검색한 libvirt_gateway_uri 값을 입력합니다.

   3

   검색한 libvirt_pool 값을 입력합니다.

   4

   검색한 libvirt_volume 값을 입력합니다.

2. 보안 오브젝트를 생성합니다.

   $ oc apply -f peer-pods-secret.yaml

프로세스

1. 다음 매니페스트를 사용하여 YAML 파일 peer-pods-cm.yaml 을 생성합니다.

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: peer-pods-cm
     namespace: openshift-sandboxed-containers-operator
   data:
     CLOUD_PROVIDER: "libvirt"
     PROXY_TIMEOUT: "15m"

2. ConfigMap 을 적용합니다.

   $ oc apply -f peer-pods-cm.yaml

프로세스

1. SSH 키를 생성합니다.

   $ ssh-keygen -f ./id_rsa -N ""

2. SSH 공개 키를 KVM 호스트에 복사합니다.

   $ ssh-copy-id -i ./id_rsa.pub <KVM_HOST_ADDRESS> 1

   1

   KVM 호스트의 IP 주소를 입력합니다.

3. 보안 오브젝트를 생성합니다.

   $ oc create secret generic ssh-key-secret \
       -n openshift-sandboxed-containers-operator \
       --from-file=id_rsa.pub=./id_rsa.pub \
       --from-file=id_rsa=./id_rsa

4. SSH 키를 삭제합니다.

   $ shred –remove id_rsa.pub id_rsa