4.5. D3N データキャッシュ

手順

1. NVMe ドライブのマウントポイントを作成します。

   構文

   mkfs.ext4 nvme-drive-path

   Copy to Clipboard Toggle word wrap

   例

   [ceph: root@host01 /]# mkfs.ext4 /dev/nvme0n1
   mount /dev/nvme0n1 /mnt/nvme0n1/

   Copy to Clipboard Toggle word wrap

2. キャッシュディレクトリーのパスを作成します。

   構文

   mkdir <nvme-mount-path>/cache-directory-name

   Copy to Clipboard Toggle word wrap

   例

   [ceph: root@host01 /]# mkdir /mnt/nvme0n1/rgw_datacache

   Copy to Clipboard Toggle word wrap

3. nvme-mount-path および rgw_d3n_l1_datacache_persistent_path に +rwx 権限を付与します。

   構文

   chmod a+rwx nvme-mount-path ; chmod a+rwx rgw_d3n_l1_datacache_persistent_path

   Copy to Clipboard Toggle word wrap

   例

   [ceph: root@host01 /]# chmod a+rwx /mnt/nvme0n1 ; chmod a+rwx /mnt/nvme0n1/rgw_datacache/

   Copy to Clipboard Toggle word wrap

4. extra_container_args を使用して RGW 仕様ファイルを作成または変更し、rgw_d3n_l1_datacache_persistent_path を podman Unit.run に追加します。

   構文

   "extra_container_args:
             "-v"
             "rgw_d3n_l1_datacache_persistent_path:rgw_d3n_l1_datacache_persistent_path"
   			"

   Copy to Clipboard Toggle word wrap

   例

   [ceph: root@host01 /]# cat rgw-spec.yml
   	service_type: rgw
   	service_id: rgw.test
   	placement:
   		hosts:
   		    host1
   		    host2
   		extra_container_args:
   		    "-v"
   		    "/mnt/nvme0n1/rgw_datacache/:/mnt/nvme0n1/rgw_datacache/"

   Copy to Clipboard Toggle word wrap

   注記

   単一ホストに RGW の複数のインスタンスがある場合は、インスタンスごとに個別の rgw_d3n_l1_datacache_persistent_path を作成し、各パスを extra_container_args に追加する必要があります。

   例:

   各ホストの RGW の 2 つのインスタンスの場合、rgw_d3n_l1_datacache_persistent_path の下に 2 つの個別の キャッシュディレクトリー、/mnt/nvme0n1/rgw_datacache/rgw1 および /mnt/nvme0n1/rgw_datacache/rgw2 を作成します。

   rgw 仕様ファイルの "extra_container_args" の例:

   "extra_container_args:
   	"-v"
   	"/mnt/nvme0n1/rgw_datacache/rgw1/:/mnt/nvme0n1/rgw_datacache/rgw1/"
   	"-v"
   	"/mnt/nvme0n1/rgw_datacache/rgw2/:/mnt/nvme0n1/rgw_datacache/rgw2/"
   "

   Copy to Clipboard Toggle word wrap

   rgw-spec.yml の例:

   [ceph: root@host01 /]# cat rgw-spec.yml
   	service_type: rgw
   		service_id: rgw.test
   		placement:
   			hosts:
   				host1
   				host2
   			count_per_host: 2
   			extra_container_args:
   				"-v"
   				"/mnt/nvme0n1/rgw_datacache/rgw1/:/mnt/nvme0n1/rgw_datacache/rgw1/"
   				"-v"
   				"/mnt/nvme0n1/rgw_datacache/rgw2/:/mnt/nvme0n1/rgw_datacache/rgw2/"

   Copy to Clipboard Toggle word wrap

5. RGW サービスを再デプロイします。

   例

   [ceph: root@host01 /]# ceph orch apply -i rgw-spec.yml

   Copy to Clipboard Toggle word wrap

手順の例

1. テストオブジェクトを作成します。

   注記

   テストオブジェクトはキャッシュするには 4 MB より大きい必要があります。

   例

   [ceph: root@host01 /]# fallocate -l 1G ./1G.dat
   [ceph: root@host01 /]# s3cmd mb s3://bkt
   [ceph: root@host01 /]# s3cmd put ./1G.dat s3://bkt

   Copy to Clipboard Toggle word wrap

2. オブジェクトの GET を実行します。

   例

   [ceph: root@host01 /]# s3cmd get s3://bkt/1G.dat /dev/shm/1G_get.dat
   download: 's3://bkt/1G.dat' -> './1G_get.dat'  [1 of 1]
   1073741824 of 1073741824   100% in   13s    73.94 MB/s  done

   Copy to Clipboard Toggle word wrap

3. キャッシュの作成を確認します。キャッシュは、設定された rgw_d3n_l1_datacache_persistent_path 内のオブジェクト key-name で構成される名前で作成されます。

   例

   [ceph: root@host01 /]# ls -lh /mnt/nvme/rgw_datacache
   
   rw-rr. 1 ceph ceph 1.0M Jun  2 06:18 cc7f967c-0021-43b2-9fdf-23858e868663.615391.1_shadow.ZCiCtMWeu_19wb100JIEZ-o4tv2IyA_1

   Copy to Clipboard Toggle word wrap

4. オブジェクトのキャッシュが作成されると、そのオブジェクトに対する次の GET 操作はキャッシュからアクセスされるため、アクセスが高速になります。

   例

   [ceph: root@host01 /]# s3cmd get s3://bkt/1G.dat /dev/shm/1G_get.dat
   download: 's3://bkt/1G.dat' -> './1G_get.dat'  [1 of 1]
   1073741824 of 1073741824   100% in    6s   155.07 MB/s  done

   Copy to Clipboard Toggle word wrap

   上記の例では、キャッシュの高速化を示すために、RAM ドライブ (/dev/shm) に書き込みを行っています。