IBM Power を使用した OpenShift Data Foundation のデプロイ

手順

1. Vault で Key/Value (KV) バックエンドパスを有効にします。

   Vault KV シークレットエンジン API の場合は、バージョン 1 を使用します。

   $ vault secrets enable -path=odf kv

   Vault KV シークレットエンジン API の場合は、バージョン 2 です。

   $ vault secrets enable -path=odf kv-v2

2. 以下のコマンドを使用して、シークレットでの書き込み操作または削除操作の実行をユーザーを制限するポリシーを作成します。

   echo '
   path "odf/*" {
     capabilities = ["create", "read", "update", "delete", "list"]
   }
   path "sys/mounts" {
   capabilities = ["read"]
   }'| vault policy write odf -

3. 上記のポリシーに一致するトークンを作成します。

   $ vault token create -policy=odf -format json

手順

1. OpenShift Web コンソールにログインします。
2. Operators → OperatorHub をクリックします。
3. Filter by keyword… ボックスに local storage を入力し、Operator の一覧から Local Storage Operator を見つけ、これをクリックします。

4. Install Operator ページで、以下のオプションを設定します。

   1. Channel を stable として更新します。
   2. Installation Mode オプションに A specific namespace on the cluster を選択します。
   3. Installed Namespace に Operator recommended namespace openshift-local-storage を選択します。
   4. Approval Strategy に Automatic を選択します。
5. Install をクリックします。

手順

1. OpenShift Web コンソールの左側のペインに移動し、Operators → OperatorHub をクリックします。
2. スクロールするか、またはキーワードを Filter by keyword ボックスに入力し、OpenShift Data Foundation Operator を検索します。
3. OpenShift Data Foundation Operator ページで Install をクリックします。

4. Install Operator ページで、以下の必須オプションがデフォルトで選択されます。

   1. Channel を stable-4.9 として更新します。
   2. Installation Mode オプションに A specific namespace on the cluster を選択します。
   3. Installed Namespace に Operator recommended namespace openshift-storage を選択します。namespace openshift-storage が存在しない場合、これは Operator のインストール時に作成されます。

5. 承認ストラテジー を Automatic または Manual として選択している。

   Automatic (自動) 更新を選択した場合、Operator Lifecycle Manager (OLM) は介入なしに、Operator の実行中のインスタンスを自動的にアップグレードします。

   Manual 更新を選択した場合、OLM は更新要求を作成します。クラスター管理者は、Operator を新しいバージョンに更新できるように更新要求を手動で承認する必要があります。

6. Console プラグイン に Enable オプションが選択されていることを確認します。
7. Install をクリックします。

手順

1. OpenShift Data Foundation ラベルの付いたワーカーノードの名前の一覧を表示し、確認します。

   $ oc get nodes -l cluster.ocs.openshift.io/openshift-storage=

   出力例:

   NAME       STATUS   ROLES    AGE     VERSION
   worker-0   Ready    worker   2d11h   v1.21.1+f36aa36
   worker-1   Ready    worker   2d11h   v1.21.1+f36aa36
   worker-2   Ready    worker   2d11h   v1.21.1+f36aa36

2. OpenShift Data Foundation リソースに使用される各ワーカーノードにログインし、Openshift Container Platform をデプロイする際にアタッチした追加ディスクの名前を見つけます。

   $ oc debug node/<node name>

   出力例:

   $ oc debug node/worker-0
   Starting pod/worker-0-debug ...
   To use host binaries, run `chroot /host`
   Pod IP: 192.168.0.63
   If you don't see a command prompt, try pressing enter.
   sh-4.4#
   sh-4.4# chroot /host
   sh-4.4# lsblk
   NAME   MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
   loop1    7:1    0   500G  0 loop
   sda      8:0    0   500G  0 disk
   sdb      8:16   0   120G  0 disk
   |-sdb1   8:17   0     4M  0 part
   |-sdb3   8:19   0   384M  0 part
   `-sdb4   8:20   0 119.6G  0 part
   sdc      8:32   0   500G  0 disk
   sdd      8:48   0   120G  0 disk
   |-sdd1   8:49   0     4M  0 part
   |-sdd3   8:51   0   384M  0 part
   `-sdd4   8:52   0 119.6G  0 part
   sde      8:64   0   500G  0 disk
   sdf      8:80   0   120G  0 disk
   |-sdf1   8:81   0     4M  0 part
   |-sdf3   8:83   0   384M  0 part
   `-sdf4   8:84   0 119.6G  0 part
   sdg      8:96   0   500G  0 disk
   sdh      8:112  0   120G  0 disk
   |-sdh1   8:113  0     4M  0 part
   |-sdh3   8:115  0   384M  0 part
   `-sdh4   8:116  0 119.6G  0 part
   sdi      8:128  0   500G  0 disk
   sdj      8:144  0   120G  0 disk
   |-sdj1   8:145  0     4M  0 part
   |-sdj3   8:147  0   384M  0 part
   `-sdj4   8:148  0 119.6G  0 part
   sdk      8:160  0   500G  0 disk
   sdl      8:176  0   120G  0 disk
   |-sdl1   8:177  0     4M  0 part
   |-sdl3   8:179  0   384M  0 part
   `-sdl4   8:180  0 119.6G  0 part /sysroot
   sdm      8:192  0   500G  0 disk
   sdn      8:208  0   120G  0 disk
   |-sdn1   8:209  0     4M  0 part
   |-sdn3   8:211  0   384M  0 part /boot
   `-sdn4   8:212  0 119.6G  0 part
   sdo      8:224  0   500G  0 disk
   sdp      8:240  0   120G  0 disk
   |-sdp1   8:241  0     4M  0 part
   |-sdp3   8:243  0   384M  0 part
   `-sdp4   8:244  0 119.6G  0 part

   この例では、worker-0 の場合、利用可能な 500G のローカルデバイスは sda、sdc、sde、sdg、sdi、sdk、sdm、sdo です。

3. OpenShift Data Foundation で使用されるストレージデバイスを持つその他のすべてのワーカーノードについてこの手順を繰り返します。詳細は、ナレッジベースアーティクル を参照してください。

手順

1. OpenShift Web コンソールにログインします。
2. openshift-local-storage namespace で、Operators → Installed Operators をクリックし、インストールされた Operator を表示します。
3. Local Storage のインストールされた Operator をクリックします。
4. Operator Details ページで、Local Volume リンクをクリックします。
5. Create Local Volume をクリックします。
6. ローカルボリュームを設定するには、YAML view をクリックします。

7. 以下の YAML を使用して、ブロック PV の LocalVolume カスタムリソースを定義します。

   apiVersion: local.storage.openshift.io/v1
   kind: LocalVolume
   metadata:
     name: localblock
     namespace: openshift-local-storage
   spec:
     logLevel: Normal
     managementState: Managed
     nodeSelector:
       nodeSelectorTerms:
         - matchExpressions:
             - key: kubernetes.io/hostname
               operator: In
               values:
                 - worker-0
                 - worker-1
                 - worker-2
     storageClassDevices:
       - devicePaths:
           - /dev/sda
         storageClassName: localblock
         volumeMode: Block

   上記の定義は、worker-0、worker-1、および worker-2 ノードから sda ローカルデバイスを選択します。localblock ストレージクラスが作成され、永続ボリュームが sda からプロビジョニングされます。

   重要

   環境に応じて nodeSelector の適切な値を指定します。デバイス名はすべてのワーカーノードで同一である必要があります。複数の devicePaths を指定することもできます。

8. Create をクリックします。

9. diskmaker-manager Pod および Persistent Volumes が作成されているかどうかを確認します。

   1. Pod の場合

      1. OpenShift Web コンソールの左側のペインから Workloads → Pods をクリックします。
      2. Project ドロップダウンリストから openshift-local-storage を選択します。
      3. LocalVolume CR の作成に使用した各ワーカーノードについて、diskmaker-manager Pod があるかどうかを確認します。

   2. 永続ボリュームの場合

      1. OpenShift Web コンソールの左側のペインから Storage → PersistentVolumes をクリックします。

      2. local-pv-* 名で永続ボリュームを確認します。永続ボリュームの数は、localVolume CR の作成中にプロビジョニングされたワーカーノードの数とストレージデバイスの数と同じです。

         重要

         • 柔軟なスケーリング機能は、3 つ以上のノードで作成したストレージクラスターが 3 つ以上のアベイラビリティーゾーンの最低要件未満に分散されている場合にのみ有効になります。

           柔軟なスケーリングについての詳細は、ストレージのスケーリングガイドの Add capacity using YAML セクションを参照してください。

10. OpenShift Web コンソールで、Operators → Installed Operators をクリックし、インストールされた Operator を表示します。

    選択された Project が openshift-storage であることを確認します。

11. OpenShift Data Foundation Operator をクリックした後、Create StorageSystem をクリックします。

12. Backing storage ページで、以下を選択します。

    1. Use an existing StorageClass オプションを選択します。

    2. LocalVolume のインストール時に使用した必要な Storage Class を選択します。

       デフォルトでは none に設定されます。

    3. Next をクリックします。

13. Capacity and nodes ページで、必要な情報を提供します。

    1. Available raw capacity には、ストレージクラスに関連付けられた割り当てられたすべてのディスクに基づいて容量の値が設定されます。これには少し時間がかかります。
    2. Selected nodes 一覧には、ストレージクラスに基づくノードが表示されます。
    3. Next をクリックします。

14. オプション: Security and network ページで、要件に応じて以下を設定します。

    1. 暗号化を有効にするには、Enable data encryption for block and file storage を選択します。

    2. 以下の Encryption level のいずれかまたは両方を選択します。

       • クラスター全体の暗号化

         クラスター全体を暗号化します (ブロックおよびファイル)。

       • StorageClass の暗号化

         暗号化対応のストレージクラスを使用して、暗号化された永続ボリューム (ブロックのみ) を作成します。

    3. Connect to an external key management service チェックボックスを選択します。これはクラスター全体の暗号化の場合はオプションになります。

       1. Key Management Service Provider はデフォルトで Vault に設定されます。
       2. Vault Service Name、Vault サーバーのホスト Address('https://<hostname または ip>')、Port 番号および Token を入力します。

       3. Advanced Settings を展開して、Vault 設定に基づいて追加の設定および証明書の詳細を入力します。

          1. OpenShift Data Foundation 専用かつ特有のキー値のシークレットパスを Backend Path に入力します。
          2. オプション: TLS Server Name および Vault Enterprise Namespace を入力します。
          3. それぞれの PEM でエンコードされた証明書ファイルをアップロードして、CA Certificate、Client Certificate、および Client Private Key を指定します。
          4. Save をクリックします。
    4. Multus は IBM Power の OpenShift Data Foundation でサポートされていないため、Default (SDN) を選択します。
    5. Next をクリックします。

15. Review and create ページで、以下を実行します。

    1. 設定の詳細を確認します。設定を変更するには、Back をクリックして以前の設定ページに戻ります。
    2. Create StorageSystem をクリックします。

手順

1. OpenShift Web コンソールの左側のペインから Workloads → Pods をクリックします。

2. Project ドロップダウンリストから openshift-storage を選択します。

   注記

   Show default projects オプションが無効になっている場合は、切り替えボタンを使用して、すべてのデフォルトプロジェクトを一覧表示します。

   各コンポーネントについて予想される Pod 数や、これがノード数によってどのように異なるかについての詳細は、表3.1「OpenShift Data Foundation クラスターに対応する Pod」 を参照してください。

3. Running および Completed タブをクリックして、以下の Pod が実行中および完了状態にあることを確認します。

   表3.1 OpenShift Data Foundation クラスターに対応する Pod

   コンポーネント	対応する Pod
   OpenShift Data Foundation Operator	ocs-operator-* (任意のワーカーノードに 1 Pod) ocs-metrics-exporter-*(任意のワーカーノードに 1 Pod) odf-operator-controller-manager-*(任意のワーカーノードに 1 Pod) odf-console-*(任意のワーカーノードに 1 Pod)
   Rook-ceph Operator	rook-ceph-operator-* (任意のワーカーノードに 1 Pod)
   Multicloud Object Gateway	noobaa-operator-* (任意のワーカーノードに 1 Pod) noobaa-core-* (任意のストレージノードに 1 Pod) noobaa-db-pg-* (任意のストレージノードに 1 Pod) noobaa-endpoint-* (任意のストレージノードに 1 Pod)
   MON	rook-ceph-mon-* (各ストレージノードに 3 Pod)
   MGR	rook-ceph-mgr-* (任意のストレージノードに 1 Pod)
   MDS	rook-ceph-mds-ocs-storagecluster-cephfilesystem-* (ストレージノードに分散する 2 Pod)
   RGW	rook-ceph-rgw-ocs-storagecluster-cephobjectstore-* (任意のストレージノードに 1 Pod)
   CSI	cephfs csi-cephfsplugin-* (各ワーカーノードに 1 Pod) csi-cephfsplugin-provisioner-* (ワーカーノードに分散する 2 Pod) rbd csi-rbdplugin-* (各ワーカーノードに 1 Pod) csi-rbdplugin-provisioner-* (ストレージノードに分散する 2 Pod)
   rook-ceph-crashcollector	rook-ceph-crashcollector-* (各ストレージノードに 1 Pod)
   OSD	rook-ceph-osd-* (各デバイス用に 1 Pod) rook-ceph-osd-prepare-ocs-deviceset-* (各デバイス用に 1 Pod)

手順

1. OpenShift Web コンソールで、Storage → OpenShift Data Foundation をクリックします。
2. Storage Systems タブをクリックし、ocs-storagecluster-storagesystem をクリックします。
3. Overview タブの Block および File ダッシュボードの Status カードで、Storage Cluster と Data Resiliency の両方に緑色のチェックマークが表示されていることを確認します。
4. Details カード で、クラスター情報が表示されていることを確認します。

手順

1. OpenShift Web コンソールで、Storage → OpenShift Data Foundation をクリックします。

2. Overview タブの Status カードで Storage System をクリックし、表示されたポップアップからストレージシステムリンクをクリックします。

   1. Object タブの Status カードで、Object Service と Data Resiliency の両方に緑色のチェックマークが表示されていることを確認します。
   2. Details カードで、MCG 情報が表示されることを確認します。

手順

1. OpenShift Web コンソールの左側のペインから Storage → Storage Classes をクリックします。

2. 以下のストレージクラスが OpenShift Data Foundation クラスターの作成時に作成されることを確認します。

   • ocs-storagecluster-ceph-rbd
   • ocs-storagecluster-cephfs
   • openshift-storage.noobaa.io
   • ocs-storagecluster-ceph-rgw

手順

1. OpenShift Web コンソールにログインします。
2. Operators → OperatorHub をクリックします。
3. Filter by keyword… ボックスに local storage を入力し、Operator の一覧から Local Storage Operator を見つけ、これをクリックします。

4. Install Operator ページで、以下のオプションを設定します。

   1. Channel を stable として更新します。
   2. Installation Mode オプションに A specific namespace on the cluster を選択します。
   3. Installed Namespace に Operator recommended namespace openshift-local-storage を選択します。
   4. Approval Strategy に Automatic を選択します。
5. Install をクリックします。

手順

1. OpenShift Web コンソールの左側のペインに移動し、Operators → OperatorHub をクリックします。
2. スクロールするか、またはキーワードを Filter by keyword ボックスに入力し、OpenShift Data Foundation Operator を検索します。
3. OpenShift Data Foundation Operator ページで Install をクリックします。

4. Install Operator ページで、以下の必須オプションがデフォルトで選択されます。

   1. Channel を stable-4.9 として更新します。
   2. Installation Mode オプションに A specific namespace on the cluster を選択します。
   3. Installed Namespace に Operator recommended namespace openshift-storage を選択します。namespace openshift-storage が存在しない場合、これは Operator のインストール時に作成されます。

5. 承認ストラテジー を Automatic または Manual として選択している。

   Automatic (自動) 更新を選択した場合、Operator Lifecycle Manager (OLM) は介入なしに、Operator の実行中のインスタンスを自動的にアップグレードします。

   Manual 更新を選択した場合、OLM は更新要求を作成します。クラスター管理者は、Operator を新しいバージョンに更新できるように更新要求を手動で承認する必要があります。

6. Console プラグイン に Enable オプションが選択されていることを確認します。
7. Install をクリックします。

手順

1. OpenShift Web コンソールにログインします。
2. openshift-local-storage namespace で、Operators → Installed Operators をクリックし、インストールされた Operator を表示します。
3. Local Storage のインストールされた Operator をクリックします。
4. Operator Details ページで、Local Volume リンクをクリックします。
5. Create Local Volume をクリックします。
6. ローカルボリュームを設定するには、YAML view をクリックします。

7. 次の YAML を使用して、ファイルシステム PV の LocalVolume カスタムリソースを定義します。

   apiVersion: local.storage.openshift.io/v1
   kind: LocalVolume
   metadata:
     name: localblock
     namespace: openshift-local-storage
   spec:
     logLevel: Normal
     managementState: Managed
     nodeSelector:
       nodeSelectorTerms:
         - matchExpressions:
             - key: kubernetes.io/hostname
               operator: In
               values:
                 - worker-0
                 - worker-1
                 - worker-2
     storageClassDevices:
       - devicePaths:
           - /dev/sda
         storageClassName: localblock
         volumeMode: Filesystem

   上記の定義は、worker-0、worker-1、および worker-2 ノードから sda ローカルデバイスを選択します。localblock ストレージクラスが作成され、永続ボリュームが sda からプロビジョニングされます。

   重要

   環境に応じて nodeSelector の適切な値を指定します。デバイス名はすべてのワーカーノードで同一である必要があります。複数の devicePaths を指定することもできます。

8. Create をクリックします。

9. アノテーションを付けて localblock ストレージクラスをデフォルトのストレージクラスとして作成します。

   1. OpenShift Web コンソールの左側のペインから Storage → StorageClasses をクリックします。
   2. localblock storageClass をクリックします。
   3. キーを storageclass.kubernetes.io/is-default-class として追加し、値を true として追加して アノテーション を編集します。
   4. Save をクリックします。

10. OpenShift Web コンソールで、Operators → Installed Operators をクリックし、インストールされた Operator を表示します。

    選択された Project が openshift-storage であることを確認します。

11. OpenShift Data Foundation Operator をクリックした後、Create StorageSystem をクリックします。
12. Backing storage ページで、Advanced を展開します。
13. Deployment type の Multicloud Object Gateway を選択します。
14. Next をクリックします。

15. オプション: Security ページで、Connect to an external key management service を選択します。

    1. Key Management Service Provider はデフォルトで Vault に設定されます。
    2. Vault Service Name、Vault サーバーのホスト Address('https://<hostname or ip>')、Port number および Token を入力します。

    3. Advanced Settings を展開して、Vault 設定に基づいて追加の設定および証明書の詳細を入力します。

       1. OpenShift Data Foundation 専用で固有のキーバリューシークレットパスを Backend Path に入力します。
       2. オプション: TLS Server Name および Vault Enterprise Namespace を入力します。
       3. それぞれの PEM でエンコードされた証明書ファイルをアップロードし、CA 証明書、クライアント証明書、および クライアントの秘密鍵 を提供します。
       4. Save をクリックします。
    4. Next をクリックします。

16. Review and create ページで、設定の詳細を確認します。

    設定設定を変更するには、Back をクリックします。

17. Create StorageSystem をクリックします。