5.4. Ceph Manager balancer 모듈 사용

프로세스

1. balancer 모듈이 활성화되어 있는지 확인합니다.

   예제

   [ceph: root@host01 /]# ceph mgr module enable balancer

2. balancer 모듈을 활성화합니다.

   예제

   [ceph: root@host01 /]# ceph balancer on

3. 모드를 변경하려면 다음 명령을 사용합니다. 기본 모드는 upmap 입니다.

   예제

   [ceph: root@host01 /]# ceph balancer mode crush-compat

   또는

   예제

   [ceph: root@host01 /]# ceph balancer mode upmap

4. 밸런서의 현재 상태를 확인합니다.

   예제

   [ceph: root@host01 /]# ceph balancer status

1. 계획을 만듭니다.
2. 현재 PG 배포를 위해 또는 계획을 실행한 후 발생할 PG 배포를 위해 데이터 배포의 품질을 평가합니다.

3. 계획을 실행합니다.

   • 현재 배포를 평가하고 점수화하려면 다음을 수행합니다.

     예제

     [ceph: root@host01 /]# ceph balancer eval

   • 단일 풀의 배포를 평가하려면 다음을 수행합니다.

     구문

     ceph balancer eval POOL_NAME

     예제

     [ceph: root@host01 /]# ceph balancer eval rbd

   • 평가에 대한 자세한 내용을 보려면 다음을 수행합니다.

     예제

     [ceph: root@host01 /]# ceph balancer eval-verbose ...

   • 현재 구성된 모드를 사용하여 계획을 생성하려면 다음을 수행합니다.

     구문

     ceph balancer optimize PLAN_NAME

     PLAN_NAME 을 사용자 지정 계획 이름으로 바꿉니다.

     예제

     [ceph: root@host01 /]# ceph balancer optimize rbd_123

   • 계획의 내용을 보려면 다음을 수행합니다.

     구문

     ceph balancer show PLAN_NAME

     예제

     [ceph: root@host01 /]# ceph balancer show rbd_123

   • 이전 계획을 삭제하려면 다음을 수행합니다.

     구문

     ceph balancer rm PLAN_NAME

     예제

     [ceph: root@host01 /]# ceph balancer rm rbd_123

   • 현재 기록된 계획을 보려면 status 명령을 사용합니다.

     [ceph: root@host01 /]# ceph balancer status

   • 계획을 실행한 후 생성되는 배포의 품질을 계산하려면 다음을 수행합니다.

     구문

     ceph balancer eval PLAN_NAME

     예제

     [ceph: root@host01 /]# ceph balancer eval rbd_123

   • 계획을 실행하려면 다음을 수행합니다.

     구문

     ceph balancer execute PLAN_NAME

     예제

     [ceph: root@host01 /]# ceph balancer execute rbd_123

     참고

     배포를 개선할 것으로 예상되는 경우에만 계획을 실행합니다. 계획이 실행되면 계획이 삭제됩니다.

프로세스

1. 각 풀에 사용할 수 있는 read_balance_score 를 확인합니다.

   [ceph: root@host01 /]# ceph osd pool ls detail

   read_balance_score 가 1보다 큰 경우 풀에서 기본 OSD의 균형이 해제되었습니다.

   동종 클러스터의 경우 최적의 점수는 [Ceil{( PGs/Number of OSDs)}/( PGs/Number of OSDs)]/[ ( PGs/Number of OSDs)/(CPU 수의 PGs/Number)]입니다. 예를 들어 32개의 PG와 10개의 OSD가 있는 풀이 있는 경우 ( PGs/Number of OSDs) = 32/10 = 3.2입니다. 따라서 모든 장치가 동일한 경우 최적 점수는 4/3.2 = 1.25인 최적 점수가 3.2의 경우 ( PG/Number of OSDs)로 나뉩니다. 64 PG가 있는 동일한 시스템에 다른 풀이 있는 경우 최적의 점수는 7/6.4 =1.09375입니다.

   출력 예:

   $ ceph osd pool ls detail
   pool 1 '.mgr' replicated size 3 min_size 1 crush_rule 0 object_hash rjenkins pg_num 1 pgp_num 1 autoscale_mode on last_change 17 flags hashpspool stripe_width 0 pg_num_max 32 pg_num_min 1 application mgr read_balance_score 3.00
   pool 2 'cephfs.a.meta' replicated size 3 min_size 1 crush_rule 0 object_hash rjenkins pg_num 16 pgp_num 16 autoscale_mode on last_change 55 lfor 0/0/25 flags hashpspool stripe_width 0 pg_autoscale_bias 4 pg_num_min 16 recovery_priority 5 application cephfs read_balance_score 1.50
   pool 3 'cephfs.a.data' replicated size 3 min_size 1 crush_rule 0 object_hash rjenkins pg_num 128 pgp_num 128 autoscale_mode on last_change 27 lfor 0/0/25 flags hashpspool,bulk stripe_width 0 application cephfs read_balance_score 1.31

2. osdmap 의 최신 사본을 가져옵니다.

   [ceph: root@host01 /]# ceph osd getmap -o om

   출력 예:

   got osdmap epoch 56

3. Cryostat를 실행합니다.

   file out.txt 에는 제안된 솔루션이 포함되어 있습니다.

   [ceph: root@host01 /]# osdmaptool om --read out.txt --read-pool _POOL_NAME_ [--vstart]

   출력 예:

   $ osdmaptool om --read out.txt --read-pool cephfs.a.meta
   ./bin/osdmaptool: osdmap file 'om'
   writing upmap command output to: out.txt
   ---------- BEFORE ------------
    osd.0 | primary affinity: 1 | number of prims: 4
    osd.1 | primary affinity: 1 | number of prims: 8
    osd.2 | primary affinity: 1 | number of prims: 4
   
   read_balance_score of 'cephfs.a.meta': 1.5
   
   ---------- AFTER ------------
    osd.0 | primary affinity: 1 | number of prims: 5
    osd.1 | primary affinity: 1 | number of prims: 6
    osd.2 | primary affinity: 1 | number of prims: 5
   
   read_balance_score of 'cephfs.a.meta': 1.13
   
   
   num changes: 2

4. file out.txt 에는 제안된 솔루션이 포함되어 있습니다.

   이 절차의 명령은 클러스터에 변경 사항을 적용하기 위해 실행되는 일반 Ceph CLI 명령입니다. vstart 클러스터에서 작업하는 경우 CLI 명령이 ./bin/ 접두사로 포맷되도록 --vstart 매개변수를 전달할 수 있습니다.

   [ceph: root@host01 /]# source out.txt

   출력 예:

   $ cat out.txt
   ceph osd pg-upmap-primary 2.3 0
   ceph osd pg-upmap-primary 2.4 2
   
   $ source out.txt
   change primary for pg 2.3 to osd.0
   change primary for pg 2.4 to osd.2

   참고

   ceph osd pg-upmap-primary 명령을 처음 실행하는 경우 다음과 같이 경고가 표시될 수 있습니다.

   Error EPERM: min_compat_client luminous < reef, which is required for pg-upmap-primary. Try 'ceph osd set-require-min-compat-client reef' before using the new interface

   이 경우 권장 명령 ceph osd set-require-min-compat-client reef 를 실행하고 클러스터의 min-compact-client를 조정합니다.