4장. 업그레이드 거부

1. Ceph Manager 노드
2. Ceph Monitor 노드
3. ceph-crash 데몬
4. Ceph OSD 노드
5. Ceph Metadata Server (MDS) 노드
6. Ceph Object Gateway(RGW) 노드
7. Ceph RBD-mirror 노드
8. CephFS-mirror 노드
9. Ceph NFS 노드

프로세스

1. cephadm 쉘에 로그인합니다.

   예제

   [root@host01 ~]# cephadm shell

2. 모든 호스트가 온라인 상태이고 스토리지 클러스터가 정상인지 확인합니다.

   예제

   [ceph: root@host01 /]# ceph -s

3. OSD noout,noscrub, nodeep-scrub 플래그를 설정하여 OSD가 업그레이드 중에 표시되지 않도록 하고 클러스터에서 불필요한 로드를 방지합니다.

   예제

   [ceph: root@host01 /]# ceph osd set noout
   [ceph: root@host01 /]# ceph osd set noscrub
   [ceph: root@host01 /]# ceph osd set nodeep-scrub

4. 서비스 버전과 사용 가능한 대상 컨테이너를 확인합니다.

   구문

   ceph orch upgrade check IMAGE_NAME

   예제

   [ceph: root@host01 /]# ceph orch upgrade check registry.redhat.io/rhceph/rhceph-8-rhel9:latest

5. 다음 방법 중 하나로 스토리지 클러스터를 업그레이드합니다.

   • 특정 호스트에서 특정 데몬 유형을 업그레이드합니다.

     구문

     ceph orch upgrade start --image IMAGE_NAME --daemon-types DAEMON_TYPE1,DAEMON_TYPE2 --hosts HOST1,HOST2

     예

     [ceph: root@host01 /]# ceph orch upgrade start --image registry.redhat.io/rhceph/rhceph-8-rhel9:latest --daemon-types mgr,mon --hosts host02,host03

   • 특정 서비스를 지정하고 업그레이드할 데몬 수를 제한합니다.

     참고

     세분화된 업그레이드 시나리오에서는 limiting 매개변수를 사용하는 경우 Ceph Manager 데몬을 업그레이드한 후 Prometheus 및 node-exporter 를 포함한 모니터링 스택 데몬을 새로 고칩니다. limiting 매개변수로 인해 Ceph Manager 업그레이드가 완료되는 데 시간이 더 오래 걸립니다. 모니터링 스택 데몬 버전은 Ceph 릴리스 간에 변경되지 않을 수 있습니다. 이 경우 재배포만 됩니다.

     참고

     제한 매개 변수가 있는 업그레이드 명령은 업그레이드를 시작하기 전에 옵션의 유효성을 검사하므로 새 컨테이너 이미지를 가져와야 할 수 있습니다. 결과적으로 제한 매개변수를 제공할 때 upgrade start 명령을 반환하는 데 시간이 걸릴 수 있습니다.

     구문

     ceph orch upgrade start --image IMAGE_NAME --services SERVICE1,SERVICE2 --limit LIMIT_NUMBER

     예

     [ceph: root@host01 /]# ceph orch upgrade start --image registry.redhat.io/rhceph/rhceph-8-rhel9:latest --services rgw.example1,rgw1.example2 --limit 2

   • {stroage-product} 8.1 이상에서만 유효합니다. 특정 호스트에서 업그레이드를 실행하려면 특정 토폴로지 레이블을 지정합니다.

     참고

     토폴로지 레이블을 사용하면 필요한 데몬 업그레이드 순서에서 변경할 수 없습니다.

     구문

     ceph orch upgrade start --topological-labels _TOPOLOGICAL_LABEL_

     예

     [ceph: root@host01 /]# ceph orch upgrade start --topological-labels datacenter=A

   • 토폴로지 레이블이 있는 Red Hat Ceph Storage 8.1 이상에서만 유효합니다. --daemon-types 옵션을 사용하여 특정 호스트에서 업그레이드를 실행하려면 특정 토폴로지 레이블을 지정합니다.

     다음 예와 유사한 시나리오가 있는 호스트에 --daemon-types 옵션을 사용합니다.

     datacenter=A 와 일치하지 않는 호스트의 datacenter=A but nonupgraded Monitor 데몬과 일치하는 Monitor 및 OSD 데몬이 모두 있는 호스트가 있습니다. 이 경우 데이터 센터=A 호스트에서 Monitor 데몬만 업그레이드하여 업그레이드 순서가 손상되지 않습니다. 이 시나리오에서는 OSD 데몬이 아닌 datacenter=A 의 Monitor 데몬만 업그레이드하려면 다음 명령을 사용합니다.

     구문

     ceph orch upgrade start _IMAGE_NAME_ --daemon-types _DAEMON_TYPE1_ --topological-labels _TOPOLOGICAL_LABEL_

     예

     [ceph: root@host01 /]# ceph orch upgrade start registry.redhat.io/rhceph/rhceph-8-rhel9:latest --daemon-types mon --topological-labels datacenter=A

     ceph orch upgrade status 명령을 사용하여 업그레이드용으로 선택한 항목을 확인합니다. 출력에서 " which" 필드를 확인합니다.

     예

     [ceph: root@host01 /]# ceph orch upgrade status
     {
         "in_progress": true,
         "target_image": "cp.icr.io/cp/ibm-ceph/ceph-8-rhel9:latest",
         "services_complete": [
             "mon"
         ],
         "which": "Upgrading daemons of type(s) mon on host(s) host01",
         "progress": "1/1 daemons upgraded",
         "message": "Currently upgrading mon daemons",
         "is_paused": false
     }

6. 여전히 업그레이드해야 하는 데몬을 확인하려면 ceph orch upgrade check 또는 ceph versions 명령을 실행합니다.

   예제

   [ceph: root@host01 /]# ceph orch upgrade check --image registry.redhat.io/rhceph/rhceph-8-rhel9:latest

7. Staggered 업그레이드를 완료하려면 나머지 모든 서비스의 업그레이드를 확인합니다.

   구문

   ceph orch upgrade start --image IMAGE_NAME

   예제

   [ceph: root@host01 /]# ceph orch upgrade start --image registry.redhat.io/rhceph/rhceph-8-rhel9:latest

프로세스

1. Cephadm 쉘에 로그인합니다.

   예

   [root@host01 ~]# cephadm shell

2. 어떤 Ceph Manager가 활성 상태이고 대기 상태인지 확인합니다.

   예

   [ceph: root@host01 /]# ceph -s
     cluster:
       id:     266ee7a8-2a05-11eb-b846-5254002d4916
       health: HEALTH_OK
   
   
     services:
       mon: 2 daemons, quorum host01,host02 (age 92s)
       mgr: host01.ndtpjh(active, since 16h), standbys: host02.pzgrhz

3. 각 대기 Ceph Manager 데몬을 수동으로 업그레이드합니다.

   구문

   ceph orch daemon redeploy mgr.ceph-HOST.MANAGER_ID --image IMAGE_ID

   예

   [ceph: root@host01 /]# ceph orch daemon redeploy mgr.ceph-host02.pzgrhz --image registry.redhat.io/rhceph/rhceph-8-rhel9:latest

4. 업그레이드된 대기 Ceph Manager로 페일오버:

   예

   [ceph: root@host01 /]# ceph mgr fail

5. standby Ceph Manager가 이제 활성화되어 있는지 확인합니다.

   예

   [ceph: root@host01 /]# ceph -s
     cluster:
       id:     266ee7a8-2a05-11eb-b846-5254002d4916
       health: HEALTH_OK
   
   
     services:
       mon: 2 daemons, quorum host01,host02 (age 1h)
       mgr: host02.pzgrhz(active, since 25s), standbys: host01.ndtpjh

6. 활성 Ceph Manager가 새 버전으로 업그레이드되었는지 확인합니다.

   구문

   ceph tell mgr.ceph-HOST.MANAGER_ID version

   예

   [ceph: root@host01 /]# ceph tell mgr.host02.pzgrhz version
   {
       "version": "18.2.0-128.el8cp",
       "release": "reef",
       "release_type": "stable"
   }

7. 나머지 Ceph Manager를 새 버전으로 업그레이드하려면 2 - 6단계를 반복합니다.

8. 모든 Ceph Manager가 새 버전으로 업그레이드되었는지 확인합니다.

   예

   [ceph: root@host01 /]# ceph mgr versions
   {
       "ceph version 18.2.0-128.el8cp (600e227816517e2da53d85f2fab3cd40a7483372) pacific (stable)": 2
   }

9. 모든 Ceph Manager를 업그레이드하면 제한 매개변수를 지정하고 태그된 업그레이드의 나머지 부분을 완료할 수 있습니다.