스토리지

1. 다음 명령을 실행하여 PV를 삭제합니다.

   $ oc delete pv <pv_name>

   Copy to Clipboard Toggle word wrap

   AWS EBS, GCE PD, Azure Disk 또는 Cinder 볼륨과 같은 외부 인프라의 연결된 스토리지 자산은 PV가 삭제된 후에도 계속 존재합니다.

2. 연결된 스토리지 자산에서 데이터를 정리합니다.
3. 연결된 스토리지 자산을 삭제합니다. 대안으로, 동일한 스토리지 자산을 재사용하려면, 스토리지 자산 정의를 사용하여 새 PV를 생성합니다.

1. 클러스터의 영구 볼륨을 나열합니다.

   $ oc get pv

   Copy to Clipboard Toggle word wrap

   출력 예

   NAME                                       CAPACITY   ACCESSMODES   RECLAIMPOLICY   STATUS    CLAIM             STORAGECLASS     REASON    AGE
    pvc-b6efd8da-b7b5-11e6-9d58-0ed433a7dd94   4Gi        RWO           Delete          Bound     default/claim1    manual                     10s
    pvc-b95650f8-b7b5-11e6-9d58-0ed433a7dd94   4Gi        RWO           Delete          Bound     default/claim2    manual                     6s
    pvc-bb3ca71d-b7b5-11e6-9d58-0ed433a7dd94   4Gi        RWO           Delete          Bound     default/claim3    manual                     3s

   Copy to Clipboard Toggle word wrap

2. 영구 볼륨 중 하나를 선택하고 다음과 같이 회수 정책을 변경합니다.

   $ oc patch pv <your-pv-name> -p '{"spec":{"persistentVolumeReclaimPolicy":"Retain"}}'

   Copy to Clipboard Toggle word wrap

3. 선택한 영구 볼륨에 올바른 정책이 있는지 확인합니다.

   $ oc get pv

   Copy to Clipboard Toggle word wrap

   출력 예

   NAME                                       CAPACITY   ACCESSMODES   RECLAIMPOLICY   STATUS    CLAIM             STORAGECLASS     REASON    AGE
    pvc-b6efd8da-b7b5-11e6-9d58-0ed433a7dd94   4Gi        RWO           Delete          Bound     default/claim1    manual                     10s
    pvc-b95650f8-b7b5-11e6-9d58-0ed433a7dd94   4Gi        RWO           Delete          Bound     default/claim2    manual                     6s
    pvc-bb3ca71d-b7b5-11e6-9d58-0ed433a7dd94   4Gi        RWO           Retain          Bound     default/claim3    manual                     3s

   Copy to Clipboard Toggle word wrap

   이전 출력에서 default/claim3 클레임에 바인딩된 볼륨이 이제 Retain 회수 정책을 갖습니다. 사용자가 default/claim3 클레임을 삭제할 때 볼륨이 자동으로 삭제되지 않습니다.

1. RWOP는 SELinux 마운트 기능을 사용합니다. 이 기능은 드라이버에 따라 달라지며 AWS EBS, Azure Disk, GCP PD, IBM Cloud Block Storage 볼륨, Cinder, vSphere 및 Red Hat OpenShift Data Foundation에서 기본적으로 활성화되어 있습니다. 타사 드라이버의 경우 스토리지 공급업체에 문의하세요.

1. ReadWriteOnce(RWO) 볼륨은 여러 노드에 마운트할 수 없습니다. 시스템이 이미 실패한 노드에 할당되어 있기 때문에, 노드가 실패하면 시스템은 연결된 RWO 볼륨을 새 노드에 마운트하는 것을 허용하지 않습니다. 이로 인해 다중 연결 오류 메시지가 표시되면 동적 영구 볼륨이 연결된 경우와 같이 중요한 워크로드에서의 데이터가 손실되는 것을 방지하기 위해 종료되거나 충돌이 발생한 노드에서 Pod를 삭제해야 합니다.
2. AWS EBS 기반 Pod에 재생성 배포 전략을 사용합니다.
3. 원시 블록 볼륨만이 파이버 채널 및 iSCSI에 대한 ReadWriteMany (RWX) 액세스 모드를 지원합니다. 자세한 내용은 "블록 볼륨 지원"을 참조하세요.

4. GCP 하이퍼디스크 균형 디스크의 경우:

   • 지원되는 액세스 모드는 다음과 같습니다.

     • ReadWriteOnce
     • ReadWriteMany
   • ReadWriteMany 액세스 모드가 활성화된 디스크의 경우 복제 및 스냅샷 기능이 비활성화됩니다.
   • ReadWriteMany 에서 단일 하이퍼디스크 균형 디스크 볼륨을 최대 8개의 인스턴스에 연결할 수 있습니다.
   • ReadWriteMany 에서 디스크 크기를 조정하려면 모든 인스턴스에서 디스크를 분리해야 합니다.
   • 추가적인 제한 사항 .
5. 기본 vSphere 환경이 vSAN 파일 서비스를 지원하는 경우 OpenShift Container Platform에서 설치한 vSphere Container Storage Interface(CSI) Driver Operator는 RWX(ReadWriteMany) 볼륨의 프로비저닝을 지원합니다. vSAN 파일 서비스가 구성되어 있지 않고 RWX를 요청하면 볼륨이 생성되지 않고 오류가 기록됩니다. 자세한 내용은 "컨테이너 스토리지 인터페이스 사용" → "VMware vSphere CSI 드라이버 운영자"를 참조하세요.

프로세스

1. OpenShift Container Platform 웹 콘솔에서 스토리지 → 영구 볼륨 클레임을 클릭합니다.
2. 영구 볼륨 클레임 생성 개요에서 영구 볼륨 클레임 생성을 클릭합니다.

3. 표시되는 페이지에 원하는 옵션을 정의합니다.

   1. 드롭다운 메뉴에서 이전에 만든 스토리지 클래스를 선택합니다.
   2. 스토리지 클레임의 고유한 이름을 입력합니다.
   3. 액세스 모드를 선택합니다. 이 선택은 저장소 클레임에 대한 읽기 및 쓰기 액세스를 결정합니다.
   4. 스토리지 클레임의 크기를 정의합니다.
4. 만들기를 클릭하여 영구 볼륨 클레임을 생성하고 영구 볼륨을 생성합니다.

프로세스

1. 스토리지 클래스를 만듭니다.

   $ cat << EOF | oc create -f -
   apiVersion: storage.k8s.io/v1
   kind: StorageClass
   metadata:
     name: <storage-class-name> 

   1

   
   parameters:
     fsType: ext4 

   2

   
     encrypted: "true"
     kmsKeyId: keyvalue 

   3

   
   provisioner: ebs.csi.aws.com
   reclaimPolicy: Delete
   volumeBindingMode: WaitForFirstConsumer
   EOF

   Copy to Clipboard Toggle word wrap

   1

   저장 클래스의 이름을 지정합니다.

   2

   프로비저닝된 볼륨에 생성되는 파일 시스템입니다.

   3

   컨테이너 지속형 볼륨을 암호화할 때 사용할 키의 전체 Amazon 리소스 이름(ARN)을 지정합니다. 키를 제공하지 않고 암호화된 필드가 true 로 설정된 경우 기본 KMS 키가 사용됩니다. AWS 설명서에서 AWS에서 키 ID와 키 ARN 찾기를 참조하세요.

2. KMS 키를 지정하는 스토리지 클래스로 영구 볼륨 클레임(PVC)을 만듭니다.

   $ cat << EOF | oc create -f -
   apiVersion: v1
   kind: PersistentVolumeClaim
   metadata:
     name: mypvc
   spec:
     accessModes:
       - ReadWriteOnce
     volumeMode: Filesystem
     storageClassName: <storage-class-name>
     resources:
       requests:
         storage: 1Gi
   EOF

   Copy to Clipboard Toggle word wrap

3. PVC를 사용하기 위한 작업 컨테이너를 만듭니다.

   $ cat << EOF | oc create -f -
   kind: Pod
   metadata:
     name: mypod
   spec:
     containers:
       - name: httpd
         image: quay.io/centos7/httpd-24-centos7
         ports:
           - containerPort: 80
         volumeMounts:
           - mountPath: /mnt/storage
             name: data
     volumes:
       - name: data
         persistentVolumeClaim:
           claimName: mypvc
   EOF

   Copy to Clipboard Toggle word wrap

프로세스

1. OpenShift Container Platform 웹 콘솔에서 스토리지 → 스토리지 클래스를 클릭합니다.
2. 스토리지 클래스 개요에서 스토리지 클래스 만들기를 클릭합니다.

3. 표시되는 페이지에 원하는 옵션을 정의합니다.

   1. 스토리지 클래스를 참조할 이름을 입력합니다.
   2. 선택적 설명을 입력합니다.
   3. 회수 정책을 선택합니다.

   4. 드롭다운 목록에서 kubernetes.io/azure-disk를 선택합니다.

      1. 스토리지 계정 유형을 입력합니다. 이는 Azure 스토리지 계정 SKU 계층에 해당합니다. 유효한 옵션은 Premium_LRS , PremiumV2_LRS , Standard_LRS , StandardSSD_LRS 및 UltraSSD_LRS 입니다.

         중요

         skuname PremiumV2_LRS는 모든 지역에서 지원되지 않으며, 일부 지원되는 지역에서는 모든 가용성 영역이 지원되지 않습니다. 자세한 내용은 Azure 문서를 참조하세요.

      2. 계정 종류를 입력합니다. 유효한 옵션은 shared, dedicated 및 managed입니다.

         중요

         Red Hat은 스토리지 클래스에서 kind: Managed의 사용만 지원합니다.

         Shared 및 Dedicated를 사용하여 Azure는 관리되지 않은 디스크를 생성합니다. 반면 OpenShift Container Platform은 머신 OS(root) 디스크의 관리 디스크를 생성합니다. Azure Disk는 노드에서 관리 및 관리되지 않은 디스크를 모두 사용하도록 허용하지 않으므로 Shared 또는 Dedicated로 생성된 관리되지 않은 디스크를 OpenShift Container Platform 노드에 연결할 수 없습니다.

   5. 원하는 대로 스토리지 클래스에 대한 추가 매개변수를 입력합니다.
4. 생성을 클릭하여 스토리지 클래스를 생성합니다.

프로세스

1. OpenShift Container Platform 웹 콘솔에서 스토리지 → 영구 볼륨 클레임을 클릭합니다.
2. 영구 볼륨 클레임 생성 개요에서 영구 볼륨 클레임 생성을 클릭합니다.

3. 표시되는 페이지에 원하는 옵션을 정의합니다.

   1. 드롭다운 메뉴에서 이전에 만든 스토리지 클래스를 선택합니다.
   2. 스토리지 클레임의 고유한 이름을 입력합니다.
   3. 액세스 모드를 선택합니다. 이 선택은 저장소 클레임에 대한 읽기 및 쓰기 액세스를 결정합니다.
   4. 스토리지 클레임의 크기를 정의합니다.
4. 만들기를 클릭하여 영구 볼륨 클레임을 생성하고 영구 볼륨을 생성합니다.

절차

1. Azure File 인증 정보가 포함된 Secret 오브젝트를 생성합니다.

   $ oc create secret generic <secret-name> --from-literal=azurestorageaccountname=<storage-account> \ 

   1

   
     --from-literal=azurestorageaccountkey=<storage-account-key> 

   2

   Copy to Clipboard Toggle word wrap

   1

   Azure File 스토리지 계정 이름입니다.

   2

   Azure File 스토리지 계정 키입니다.

2. 생성한 Secret 오브젝트를 참조하는 PersistentVolume 오브젝트를 생성합니다.

   apiVersion: "v1"
   kind: "PersistentVolume"
   metadata:
     name: "pv0001" 

   1

   
   spec:
     capacity:
       storage: "5Gi" 

   2

   
     accessModes:
       - "ReadWriteOnce"
     storageClassName: azure-file-sc
     azureFile:
       secretName: <secret-name> 

   3

   
       shareName: share-1 

   4

   
       readOnly: false

   Copy to Clipboard Toggle word wrap

   1

   영구 볼륨의 이름입니다.

   2

   이 영구 볼륨의 크기입니다.

   3

   Azure File에서 인증 정보를 공유하는 시크릿의 이름입니다.

   4

   Azure File 공유의 이름입니다.

3. 생성한 영구 볼륨에 매핑되는 PersistentVolumeClaim 오브젝트를 생성합니다.

   apiVersion: "v1"
   kind: "PersistentVolumeClaim"
   metadata:
     name: "claim1" 

   1

   
   spec:
     accessModes:
       - "ReadWriteOnce"
     resources:
       requests:
         storage: "5Gi" 

   2

   
     storageClassName: azure-file-sc 

   3

   
     volumeName: "pv0001" 

   4

   Copy to Clipboard Toggle word wrap

   1

   영구 볼륨 클레임의 이름입니다.

   2

   이 영구 볼륨 클레임의 크기입니다.

   3

   영구 볼륨을 프로비저닝하는 데 사용되는 스토리지 클래스의 이름입니다. PersistentVolume 정의에 사용되는 스토리지 클래스를 지정합니다.

   4

   Azure File 공유를 참조하는 기존 PersistentVolume 오브젝트의 이름입니다.

1. 실행 가능한 파일이 클러스터의 모든 노드에 있는지 확인합니다.
2. 볼륨 플러그인 경로(/etc/kubernetes/kubelet-plugins/volume/exec/<vendor>~<driver>/<driver>)에 실행 가능 파일을 배치합니다.

프로세스

1. OpenShift Container Platform 콘솔에서 스토리지 → 영구 볼륨 클레임을 클릭합니다.
2. 영구 볼륨 클레임 생성 개요에서 영구 볼륨 클레임 생성을 클릭합니다.

3. 표시되는 페이지에 원하는 옵션을 정의합니다.

   1. 드롭다운 메뉴에서 이전에 생성한 스토리지 클래스를 선택합니다.
   2. 스토리지 클레임의 고유한 이름을 입력합니다.
   3. 액세스 모드를 선택합니다. 이 선택에 따라 스토리지 클레임에 대한 읽기 및 쓰기 액세스가 결정됩니다.
   4. 스토리지 클레임의 크기를 정의합니다.
4. 만들기를 클릭하여 영구 볼륨 클레임을 생성하고 영구 볼륨을 생성합니다.

절차

1. PV에 대한 오브젝트 정의를 생성합니다.

   apiVersion: v1
   kind: PersistentVolume
   metadata:
     name: pv0001 

   1

   
   spec:
     capacity:
       storage: 5Gi 

   2

   
     accessModes:
     - ReadWriteOnce 

   3

   
     nfs: 

   4

   
       path: /tmp 

   5

   
       server: 172.17.0.2 

   6

   
     persistentVolumeReclaimPolicy: Retain 

   7

   Copy to Clipboard Toggle word wrap

   1

   볼륨의 이름입니다. 이는 다양한 oc <command> pod에서 PV ID입니다.

   2

   이 볼륨에 할당된 스토리지의 용량입니다.

   3

   볼륨에 대한 액세스를 제어하는 것으로 표시되지만 실제로 레이블에 사용되며 PVC를 PV에 연결하는 데 사용됩니다. 현재는 accessModes를 기반으로 하는 액세스 규칙이 적용되지 않습니다.

   4

   사용 중인 볼륨 유형입니다(이 경우 nfs 플러그인).

   5

   NFS 서버에서 내보낸 경로입니다.

   6

   NFS 서버의 호스트 이름 또는 IP 주소입니다.

   7

   PV의 회수 정책입니다. 이는 릴리스될 때 볼륨에 발생하는 작업을 정의합니다.

   참고

   각 NFS 볼륨은 클러스터의 모든 스케줄링 가능한 노드에서 마운트할 수 있어야 합니다.

2. PV가 생성되었는지 확인합니다.

   $ oc get pv

   Copy to Clipboard Toggle word wrap

   출력 예

   NAME     LABELS    CAPACITY     ACCESSMODES   STATUS      CLAIM  REASON    AGE
   pv0001   <none>    5Gi          RWO           Available                    31s

   Copy to Clipboard Toggle word wrap

3. 새 PV에 바인딩하는 영구 볼륨 클레임을 생성합니다.

   apiVersion: v1
   kind: PersistentVolumeClaim
   metadata:
     name: nfs-claim1
   spec:
     accessModes:
       - ReadWriteOnce 

   1

   
     resources:
       requests:
         storage: 5Gi 

   2

   
     volumeName: pv0001
     storageClassName: ""

   Copy to Clipboard Toggle word wrap

   1

   액세스 모드는 보안을 적용하지 않고 PV를 PVC에 일치시키기 위한 레이블 역할을 합니다.

   2

   이 클레임에서는 5Gi 이상의 용량을 제공하는 PV를 찾습니다.

4. 영구 볼륨 클레임이 생성되었는지 확인합니다.

   $ oc get pvc

   Copy to Clipboard Toggle word wrap

   출력 예

   NAME         STATUS   VOLUME   CAPACITY   ACCESS MODES   STORAGECLASS   AGE
   nfs-claim1   Bound    pv0001   5Gi        RWO                           2m

   Copy to Clipboard Toggle word wrap