第22章 VMWare vSphere の設定

手順

1. すべてのマスターのデフォルトで /etc/origin/master/master-config.yaml に置かれているマスター設定ファイルを編集し、apiServerArguments および controllerArguments セクションの内容を更新します。

   kubernetesMasterConfig:
     ...
     apiServerArguments:
       cloud-provider:
         - "vsphere"
       cloud-config:
         - "/etc/origin/cloudprovider/vsphere.conf"
     controllerArguments:
       cloud-provider:
         - "vsphere"
       cloud-config:
         - "/etc/origin/cloudprovider/vsphere.conf"

   Copy to Clipboard Toggle word wrap
   重要

   コンテナー化インストールをトリガーすると、/etc/origin と /var/lib/origin のディレクトリーのみがマスターとノードのコンテナーにマウントされます。したがって、master-config.yaml は/etc/ ではなく /etc/origin/master になければなりません。

2. Ansible を使用して vSphere 用に OpenShift Container Platform を設定する場合には、/etc/origin/cloudprovider/vsphere.conf ファイルは自動的に作成されます。vSphere 用の OpenShift Container Platform を手動で設定するので、このファイルを作成して、以下を入力する必要があります。

   [Global] 

   1

   
           user = "myusername" 

   2

   
           password = "mypassword" 

   3

   
           port = "443" 

   4

   
           insecure-flag = "1" 

   5

   
           datacenter = "mydatacenter" 

   6

   
   
   [VirtualCenter "10.10.0.2"] 

   7

   
           user = "myvCenterusername"
           password = "password"
   
   [VirtualCenter "10.10.0.3"] 

   8

   
           port = "448"
           insecure-flag = "0"
   
   [Workspace] 

   9

   
           server = "10.10.0.2" 

   10

   
           datacenter = "mydatacenter"
           folder = "path/to/vms" 

   11

   
           datastore = "shared-datastore" 

   12

   
           resourcepool-path = "myresourcepoolpath" 

   13

   
   
   [Disk]
           scsicontrollertype = pvscsi 

   14

   
   
   [Network]
           public-network = "VM Network" 

   15

   Copy to Clipboard Toggle word wrap

   1

   [Global] セクションに設定されるプロパティーは、個別の [VirtualCenter] セクションの設定で上書きされない限り、すべての指定される vcenter で使用されます。

   2

   vSphere クラウドプロバイダーの vCenter ユーザー名。

   3

   指定されたユーザーの vCenter パスワード。

   4

   オプション。vCenter サーバーのポート番号。デフォルトはポート 443 になります。

   5

   vCenter が自己署名証明書を使用している場合は 1 に設定します。

   6

   ノード VM がデプロイされているデータセンターの名前。

   7

   この Virtual Center の特定の [Global] プロパティーを上書きします。使用できる設定は [Port]、[user]、[insecure-flag]、[datacenters] です。指定されない設定は [Global] セクションからプルされます。

   8

   オプション。追加の vCenter サーバーです。

   9

   各種の vSphere Cloud Provider 機能で使用されるプロパティーを設定します。たとえば、動的プロビジョニング、ストレージプロファイルベースのボリュームプロビジョニングなどがこれに含まれます。

   10

   vCenter サーバーの IP アドレスまたは FQDN。

   11

   ノード VM の VM ディレクトリーへのパス。

   12

   ストレージクラスまたは動的プロビジョニングを使ったボリュームのプロビジョニングに使用されるデータストアの名前に設定されます。OpenShift Container Platform 3.9 よりも前のバージョンでは、データストアがストレージディレクトリーにあるか、またはデータストアクラスターのメンバーである場合には、完全パスが必要でした。

   13

   オプション。ストレージプロファイルベースのボリュームプロビジョニングのダミー VM が作成される必要のあるリソースプールのパスに設定されます。

   14

   VMDK が VM に割り当てられる際に設定される SCSI コントローラーのタイプ。

   15

   vSphere がノードにアクセスするために使用されるネットワークポートグループに設定されます。これはデフォルトで VM ネットワークと呼ばれます。これは Kubernetes に登録されているノードホストの ExternalIP です。

   クラスターインストールプロセスでは、デフォルトでシングルゾーンまたは単一の vCenter を設定します。

   異なるゾーンの vSphere に OpenShift Container Platform をデプロイすると、単一障害点を回避しやすくなりますが、ゾーン間での共有ストレージの必要が生じます。OpenShift Container Platform ノードのホストがゾーン A でダウンした場合、Pod はゾーン B に移動する必要があります。詳細情報は、Kubernetes ドキュメントの マルチゾーンの制限について参照してください。

   重要

   この設定により、VMDK は常に一貫性のある UUID を VM に提示し、ディスクは正常にマウントされます。

   クラスターに参加するすべての仮想マシンノードについて、「VM properties」 「VM Options」 「Advanced」 「Configuration Parameters」 「disk.enabledUUID=TRUE」を設定します。

   または、GOVC ツールを使用することもできます。

   1. GOVC 環境をセットアップします。

      export GOVC_URL='vCenter IP OR FQDN'
      export GOVC_USERNAME='vCenter User'
      export GOVC_PASSWORD='vCenter Password'
      export GOVC_INSECURE=1

      Copy to Clipboard Toggle word wrap

3. ノード VM パスを見つけます。

   govc ls /datacenter/vm/<vm-folder-name>

   Copy to Clipboard Toggle word wrap

   1. すべての VM で disk.EnableUUID を true に設定します。

      govc vm.change -e="disk.enableUUID=1" -vm='VM Path'

      Copy to Clipboard Toggle word wrap
      注記

      OpenShift Container Platform ノード VM がテンプレート VM で作成されている場合、disk.EnableUUID=1 をテンプレート VM に設定することができます。このテンプレートからクローン作成される VM はこのプロパティーを継承します。

4. OpenShift Container Platform サービスを再起動します。

   # master-restart api
   # master-restart controllers
   # systemctl restart atomic-openshift-node

   Copy to Clipboard Toggle word wrap

1. 適切なノード設定マップを編集して、kubeletArguments セクションの内容を更新します。

   kubeletArguments:
     cloud-provider:
       - "vsphere"
     cloud-config:
       - "/etc/origin/cloudprovider/vsphere.conf"

   Copy to Clipboard Toggle word wrap
   重要

   クラウドプロバイダーの統合を正常に機能させるため、nodeName は vSphere の VM 名と一致していなければなりません。また、この名前は RFC1123 に準拠している必要もあります。

2. すべてのノードで OpenShift Container Platform サービスを再起動します。

   # systemctl restart atomic-openshift-node

   Copy to Clipboard Toggle word wrap

1. CLI にクラスター管理者としてログインします。

2. 既存のノードラベルをチェックし、これらをバックアップします。

   $ oc describe node <node_name> | grep -Poz '(?s)Labels.*\n.*(?=Taints)'

   Copy to Clipboard Toggle word wrap

3. ノードを削除します。

   $ oc delete node <node_name>

   Copy to Clipboard Toggle word wrap

4. 各ノードホストで OpenShift Container Platform サービスを再起動します。

   # systemctl restart atomic-openshift-node

   Copy to Clipboard Toggle word wrap
5. 以前に使用していた各ノードのラベルを再度追加します。

1. OpenShift Container Platform は、vsphere-volume プロビジョナーを使用する場合、および Ansible インベントリーで openshift_cloudprovider_kind=vsphere および openshift_vsphere_* 変数を使用する場合に、以下の storageclass を作成します。その他の方法として、これを手動で作成することもできます。

   $ oc get --export storageclass vsphere-standard -o yaml
   kind: StorageClass
   apiVersion: storage.k8s.io/v1
   metadata:
     name: "vsphere-standard" 

   1

   
   provisioner: kubernetes.io/vsphere-volume 

   2

   
   parameters:
       diskformat: zeroedthick 

   3

   
       datastore: "ose3-vmware" 

   4

   
   reclaimPolicy: Delete

   Copy to Clipboard Toggle word wrap

   1

   ストレージクラス名

   2

   ストレージプロビジョナーのタイプ: vsphere-volume

   3

   ディスクのタイプ: zeroedthick、thin

   4

   ディスクが作成されるソースデータストア。

2. PV を要求して、以前の手順で示した storageclass を使用すると、OpenShift Container Platform は vSphere インフラストラクチャーにディスクを作成します。ディスクが作成されたことを確認するには以下を実行します。

   $ ls /vmfs/volumes/ose3-vmware/kubevols | grep kubernetes
   kubernetes-dynamic-pvc-790615e8-a22a-11e8-bc85-0050568e2982.vmdk

   Copy to Clipboard Toggle word wrap

手順

1. vSphere ボリュームから新規設定ファイルを作成します。

     kind: PersistentVolumeClaim
     apiVersion: v1
     metadata:
       name: vsphere-registry-storage
       annotations:
         volume.beta.kubernetes.io/storage-class: vsphere-standard
     spec:
       accessModes:
         - ReadWriteOnce
       resources:
         requests:
           storage: 30Gi

   Copy to Clipboard Toggle word wrap

2. OpenShift Container Platform でファイルを作成します。

   $ oc create -f pvc-registry.yaml

   Copy to Clipboard Toggle word wrap

3. 新規 PVC を使用するようにボリューム設定を更新します。

   $ oc volume dc docker-registry --add --name=registry-storage -t \
   pvc --claim-name=vsphere-registry-storage --overwrite

   Copy to Clipboard Toggle word wrap

4. 更新された設定を読み取るためにレジストリーを再デプロイします。

   $ oc rollout latest docker-registry -n default

   Copy to Clipboard Toggle word wrap

5. ボリュームが割り当てられていることを確認します。

   $ oc volume dc docker-registry -n default

   Copy to Clipboard Toggle word wrap