3.3. 使用带有 CLI 的对等 pod 部署 OpenShift 沙盒容器工作负载

流程

1. 收集 secret 对象所需的参数值。确保记下每个值。

   1. 检索实例 ID：

      $ INSTANCE_ID=$(oc get nodes -l 'node-role.kubernetes.io/worker' -o jsonpath='{.items[0].spec.providerID}' | sed 's#[^ ]*/##g')

      Copy to Clipboard Toggle word wrap

      secret 对象本身不需要这个值，而是用于检索 secret 对象的其他值。

   2. 检索 AWS 区域：

      $ AWS_REGION=$(oc get infrastructure/cluster -o jsonpath='{.status.platformStatus.aws.region}') && echo "AWS_REGION: \"$AWS_REGION\""

      Copy to Clipboard Toggle word wrap

   3. 检索 AWS 子网 ID：

      $ AWS_SUBNET_ID=$(aws ec2 describe-instances --instance-ids ${INSTANCE_ID} --query 'Reservations[*].Instances[*].SubnetId' --region ${AWS_REGION} --output text) && echo "AWS_SUBNET_ID: \"$AWS_SUBNET_ID\""

      Copy to Clipboard Toggle word wrap

   4. 检索 AWS VPC ID：

      $ AWS_VPC_ID=$(aws ec2 describe-instances --instance-ids ${INSTANCE_ID} --query 'Reservations[*].Instances[*].VpcId' --region ${AWS_REGION} --output text) && echo "AWS_VPC_ID: \"$AWS_VPC_ID\""

      Copy to Clipboard Toggle word wrap

   5. 检索 AWS 安全组 ID：

      $ AWS_SG_IDS=$(aws ec2 describe-instances --instance-ids ${INSTANCE_ID} --query 'Reservations[*].Instances[*].SecurityGroups[*].GroupId' --region $AWS_REGION --output json | jq -r '.[][][]' | paste -sd ",") && echo "AWS_SG_IDS: \"$AWS_SG_IDS\""

      Copy to Clipboard Toggle word wrap

2. 使用以下清单创建 YAML 文件：

   apiVersion: v1
   kind: Secret
   metadata:
     name: peer-pods-secret
     namespace: openshift-sandboxed-containers-operator
   type: Opaque
   stringData:
     AWS_ACCESS_KEY_ID: "<enter value>" 

   1

   
     AWS_SECRET_ACCESS_KEY: "<enter value>" 

   2

   
     AWS_REGION: "<enter value>" 

   3

   
     AWS_SUBNET_ID: "<enter value>" 

   4

   
     AWS_VPC_ID: "<enter value>" 

   5

   
     AWS_SG_IDS: "<enter value>" 

   6

   Copy to Clipboard Toggle word wrap

   1

   在开始之前，输入您准备的 AWS_ACCESS_KEY_ID 值。

   2

   在开始之前，输入您准备的 AWS_SECRET_ACCESS_KEY 值。

   3

   输入您检索到的 AWS_REGION 值。

   4

   输入您检索到的 AWS_SUBNET_ID 值。

   5

   输入您检索到的 AWS_VPC_ID 值。

   6

   输入您检索到的 AWS_SG_IDS 值。

3. 应用 secret 对象：

   $ oc apply -f peer-pods-secret.yaml

   Copy to Clipboard Toggle word wrap

流程

1. 使用以下清单创建 YAML 文件：

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: peer-pods-cm
     namespace: openshift-sandboxed-containers-operator
   data:
     CLOUD_PROVIDER: "aws"
     VXLAN_PORT: "9000"
     PODVM_INSTANCE_TYPE: "t3.medium" 

   1

   
     PODVM_INSTANCE_TYPES: "t2.small,t2.medium,t3.large" 

   2

   
     PROXY_TIMEOUT: "5m"

   Copy to Clipboard Toggle word wrap

   1

   定义工作负载中没有定义类型时使用的默认实例类型。

   2

   列出创建 pod 时可以指定的所有实例类型。这可让您为需要较少的内存和 CPU 或更大实例的工作负载定义较小的实例。

2. 应用 ConfigMap ：

   $ oc apply -f peer-pods-cm.yaml

   Copy to Clipboard Toggle word wrap

流程

1. 检索 Azure 订阅 ID：

   $ AZURE_SUBSCRIPTION_ID=$(az account list --query "[?isDefault].id" -o tsv) && echo "AZURE_SUBSCRIPTION_ID: \"$AZURE_SUBSCRIPTION_ID\""

   Copy to Clipboard Toggle word wrap

2. 生成 RBAC 内容。这会生成客户端 ID、客户端 secret 和租户 ID：

   $ az ad sp create-for-rbac --role Contributor --scopes /subscriptions/$AZURE_SUBSCRIPTION_ID --query "{ client_id: appId, client_secret: password, tenant_id: tenant }

   Copy to Clipboard Toggle word wrap

   此时会出现以下输出：

   {
     "client_id": `AZURE_CLIENT_ID`,
     "client_secret": `AZURE_CLIENT_SECRET`,
     "tenant_id": `AZURE_TENANT_ID`
   }

   Copy to Clipboard Toggle word wrap
3. 在 RBAC 输出中保存值，以便在 secret 对象中使用。

4. 收集 secret 对象的额外参数值。确保记下每个值。

   1. 检索资源组：

      $ AZURE_RESOURCE_GROUP=$(oc get infrastructure/cluster -o jsonpath='{.status.platformStatus.azure.resourceGroupName}') && echo "AZURE_RESOURCE_GROUP: \"$AZURE_RESOURCE_GROUP\""

      Copy to Clipboard Toggle word wrap

   2. 检索 Azure 区域：

      $ AZURE_REGION=$(az group show --resource-group ${AZURE_RESOURCE_GROUP} --query "{Location:location}" --output tsv) && echo "AZURE_REGION: \"$AZURE_REGION\""

      Copy to Clipboard Toggle word wrap

5. 使用以下清单创建 YAML 文件：

   apiVersion: v1
   kind: Secret
   metadata:
     name: peer-pods-secret
     namespace: openshift-sandboxed-containers-operator
   type: Opaque
   stringData:
     AZURE_CLIENT_ID: "<enter value>" 

   1

   
     AZURE_CLIENT_SECRET: "<enter value>" 

   2

   
     AZURE_TENANT_ID: "<enter value>" 

   3

   
     AZURE_SUBSCRIPTION_ID: "<enter value>" 

   4

   
     AZURE_REGION: "<enter value>" 

   5

   
     AZURE_RESOURCE_GROUP: "<enter value>" 

   6

   Copy to Clipboard Toggle word wrap

   1

   输入您在 RBAC 文件中生成的 AZURE_CLIENT_ID 值。

   2

   输入您在 RBAC 文件中生成的 AZURE_CLIENT_SECRET 值。

   3

   输入您在 RBAC 文件中生成的 AZURE_TENANT_ID 值。

   4

   输入您检索到的 AZURE_SUBSCRIPTION_ID 值。

   5

   输入您检索到的 AZURE_REGION 值。

   6

   输入您检索到的 AZURE_RESOURCE_GROUP 值。

6. 应用 secret 对象：

   $ oc apply -f peer-pods-secret.yaml

   Copy to Clipboard Toggle word wrap

流程

1. 收集 Azure peer-pod ConfigMap 的配置值。确保记下每个值。

   1. 检索 Azure VNet 名称：

      $ AZURE_VNET_NAME=$(az network vnet list --resource-group ${AZURE_RESOURCE_GROUP} --query "[].{Name:name}" --output tsv)

      Copy to Clipboard Toggle word wrap

      ConfigMap 不需要这个值，而是用于检索 Azure 子网 ID。

   2. 检索 Azure 子网 ID：

      $ AZURE_SUBNET_ID=$(az network vnet subnet list --resource-group ${AZURE_RESOURCE_GROUP} --vnet-name $AZURE_VNET_NAME --query "[].{Id:id} | [? contains(Id, 'worker')]" --output tsv) && echo "AZURE_SUBNET_ID: \"$AZURE_SUBNET_ID\""

      Copy to Clipboard Toggle word wrap

   3. 检索 Azure 网络安全组(NSG) ID：

      $ AZURE_NSG_ID=$(az network nsg list --resource-group ${AZURE_RESOURCE_GROUP} --query "[].{Id:id}" --output tsv) && echo "AZURE_NSG_ID: \"$AZURE_NSG_ID\""

      Copy to Clipboard Toggle word wrap

2. 使用以下清单创建 YAML 文件：

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: peer-pods-cm
     namespace: openshift-sandboxed-containers-operator
   data:
     CLOUD_PROVIDER: "azure"
     VXLAN_PORT: "9000"
     AZURE_INSTANCE_SIZE: "Standard_B2als_v2" 

   1

   
     AZURE_INSTANCE_SIZES: "Standard_B2als_v2,Standard_D2as_v5,Standard_D4as_v5,Standard_D2ads_v5" 

   2

   
     AZURE_SUBNET_ID: "<enter value>" 

   3

   
     AZURE_NSG_ID: "<enter value>" 

   4

   
     PROXY_TIMEOUT: "5m"
     DISABLECVM: "true"

   Copy to Clipboard Toggle word wrap

   1

   定义工作负载中没有定义实例时使用的默认实例大小。

   2

   列出创建 pod 时可以指定的所有实例大小。这可让您为需要较少的内存和 CPU 或更大实例的工作负载定义较小的实例。

   3

   输入您检索到的 AZURE_SUBNET_ID 值。

   4

   输入您检索到的 AZURE_NSG_ID 值。

3. 应用 ConfigMap ：

   $ oc apply -f peer-pods-cm.yaml

   Copy to Clipboard Toggle word wrap

流程

1. 生成 SSH 密钥：

   $ ssh-keygen -f ./id_rsa -N ""

   Copy to Clipboard Toggle word wrap

2. 创建 SSH secret 对象：

   $ oc create secret generic ssh-key-secret -n openshift-sandboxed-containers-operator --from-file=id_rsa.pub=./id_rsa.pub --from-file=id_rsa=./id_rsa

   Copy to Clipboard Toggle word wrap

流程

1. 登录到 IBM Z KVM 主机并设置 libvirt 用于存储管理的 shell 变量。

   1. 运行以下命令设置 libvirt 池的名称：

      $ export LIBVIRT_POOL=<name_of_libvirt_pool_to_create>

      Copy to Clipboard Toggle word wrap

   2. 运行以下命令设置 libvirt 池的名称：

      $ export LIBVIRT_VOL_NAME=<name_of_libvirt_volume_to_create>

      Copy to Clipboard Toggle word wrap

   3. 运行以下命令，设置默认存储池位置的路径：

      $ export LIBVIRT_POOL_DIRECTORY=<name_of_target_directory> 

      1

      Copy to Clipboard Toggle word wrap

      1

      为确保 libvirt 具有读写访问权限，请使用 libvirt 存储目录的子目录。默认为 /var/lib/libvirt/images/。

2. 运行以下命令来创建 libvirt 池：

   $ virsh pool-define-as $LIBVIRT_POOL --type dir --target "$LIBVIRT_POOL_DIRECTORY"

   Copy to Clipboard Toggle word wrap

3. 运行以下命令来启动 libvirt 池：

   $ virsh pool-start $LIBVIRT_POOL

   Copy to Clipboard Toggle word wrap

4. 运行以下命令，为池创建 libvirt 卷：

   $ virsh -c qemu:///system \
     vol-create-as --pool $LIBVIRT_POOL \
     --name $LIBVIRT_VOL_NAME \
     --capacity 20G \
     --allocation 2G \
     --prealloc-metadata \
     --format qcow2

   Copy to Clipboard Toggle word wrap

流程

1. 为您的系统设置 RHEL ORG_ID 和 ACTIVATION_KEY shell 变量。

   1. 当使用订阅的 RHEL 系统时，运行以下命令，将 shell 环境变量设置为保存机构 ID 和 Red Hat Subscription Management (RHSM)的激活码：

      $ export ORG_ID=$(cat ~/.rh_subscription/orgid)
      
      $ export ACTIVATION_KEY=$(cat ~/.rh_subscription/activation_key)

      Copy to Clipboard Toggle word wrap

   2. 使用未订阅的 RHEL 系统时，运行以下命令来设置适当的订阅值：

      $ export ORG_ID=<RHEL_ORGID_VALUE>
      
      $ export ACTIVATION_KEY=<RHEL_ACVTIVATION_KEY>

      Copy to Clipboard Toggle word wrap

2. 登录到您的 IBM Z 系统并执行以下步骤：

   1. 从红帽客户门户网站下载 s390x RHEL KVM 客户机镜像到 libvirt 存储目录，以授予 libvirt 正确访问权限。默认目录为 /var/lib/libvirt/images。镜像用于生成对等 pod 虚拟机镜像，该镜像将包含相关的二进制文件。

   2. 运行以下命令，为下载的镜像设置 IMAGE_URL shell 环境变量：

      $ export IMAGE_URL=<location_of_downloaded_KVM_guest_image> 

      1

      Copy to Clipboard Toggle word wrap

      1

      输入您在上一步中下载的 KVM 客户机镜像的路径。

   3. 运行以下命令注册客户端 KVM 镜像：

      $ export REGISTER_CMD="subscription-manager register --org=${ORG_ID} \
        --activationkey=${ACTIVATION_KEY}"

      Copy to Clipboard Toggle word wrap

   4. 运行以下命令来自定义客户端 KVM 镜像：

      $ virt-customize -v -x -a ${IMAGE_URL} --run-command "${REGISTER_CMD}"

      Copy to Clipboard Toggle word wrap

   5. 运行以下命令设置镜像的校验和：

      $ export IMAGE_CHECKSUM=$(sha256sum ${IMAGE_URL} | awk '{ print $1 }')

      Copy to Clipboard Toggle word wrap

流程

1. 使用以下清单创建 YAML 文件 peer-pods-secret.yaml ：

   apiVersion: v1
   kind: Secret
   metadata:
     name: peer-pods-secret
     namespace: openshift-sandboxed-containers-operator
   type: Opaque
   stringData:
     CLOUD_PROVIDER: "libvirt" 

   1

   
     LIBVIRT_URI: "<libvirt_gateway_uri>" 

   2

   
     LIBVIRT_POOL: "<libvirt_pool>" 

   3

   
     LIBVIRT_VOL_NAME: "<libvirt_volume>" 

   4

   Copy to Clipboard Toggle word wrap

   1

   输入 libvirt 作为云供应商。

   2

   输入您检索到的 libvirt_gateway_uri 值。

   3

   输入您检索到的 libvirt_pool 值。

   4

   输入您检索到的 libvirt_volume 值。

2. 创建 secret 对象：

   $ oc apply -f peer-pods-secret.yaml

   Copy to Clipboard Toggle word wrap

流程

1. 使用以下清单创建 YAML 文件 peer-pods-cm.yaml ：

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: peer-pods-cm
     namespace: openshift-sandboxed-containers-operator
   data:
     CLOUD_PROVIDER: "libvirt"
     PROXY_TIMEOUT: "15m"

   Copy to Clipboard Toggle word wrap

2. 应用 ConfigMap ：

   $ oc apply -f peer-pods-cm.yaml

   Copy to Clipboard Toggle word wrap

流程

1. 生成 SSH 密钥：

   $ ssh-keygen -f ./id_rsa -N ""

   Copy to Clipboard Toggle word wrap

2. 将 SSH 公钥复制到 KVM 主机：

   $ ssh-copy-id -i ./id_rsa.pub <KVM_HOST_ADDRESS> 

   1

   Copy to Clipboard Toggle word wrap

   1

   输入 KVM 主机的 IP 地址。

3. 创建 secret 对象：

   $ oc create secret generic ssh-key-secret \
       -n openshift-sandboxed-containers-operator \
       --from-file=id_rsa.pub=./id_rsa.pub \
       --from-file=id_rsa=./id_rsa

   Copy to Clipboard Toggle word wrap

4. 删除 SSH 密钥：

   $ shred –remove id_rsa.pub id_rsa

   Copy to Clipboard Toggle word wrap