第1章 Data Grid キャッシュのインデックス作成
Data Grid は、キャッシュに値のインデックスを作成して、クエリーパフォーマンスを向上できます。これにより、インデックスのないクエリーよりも高速な結果が得られます。インデックス作成により、クエリーで全文検索機能を使用することもできます。
Data Grid は、Apache Lucene テクノロジーを使用して、キャッシュ内の値にインデックスを付けます。
1.1. キャッシュをインデックス化するための Data Grid の設定 リンクのコピーリンクがクリップボードにコピーされました!
キャッシュ設定でのインデックス作成を有効にし、インデックスの作成時にどのエンティティー Data Grid を含めるかを指定します。
クエリーを使用する場合は、常に Data Grid がキャッシュをインデックス化するように設定してください。インデックス作成により、クエリーのパフォーマンスが大幅に改善されるため、データへの洞察を得ることができます。
手順
キャッシュ設定でのインデックス作成を有効にします。
<distributed-cache> <indexing> <!-- Indexing configuration goes here. --> </indexing> </distributed-cache><distributed-cache> <indexing> <!-- Indexing configuration goes here. --> </indexing> </distributed-cache>Copy to Clipboard Copied! Toggle word wrap Toggle overflow ヒント設定に
indexing要素を追加すると、enabled=true属性を含めなくてもインデックスを作成できます。この要素を追加するリモートキャッシュでは、エンコーディングを ProtoStream として暗黙的に設定します。
indexed-entity要素でインデックスを作成するエンティティーを指定します。Copy to Clipboard Copied! Toggle word wrap Toggle overflow
Protobuf メッセージ
スキーマで宣言されたメッセージを
indexed-entity要素の値として指定します。以下に例を示します。Copy to Clipboard Copied! Toggle word wrap Toggle overflow この設定は、
book_sampleパッケージ名で、スキーマのBookメッセージをインデックス化します。Copy to Clipboard Copied! Toggle word wrap Toggle overflow
Java オブジェクト
-
@Indexedアノテーションを含む各クラスの完全修飾名 (FQN) を指定します。
XML
ConfigurationBuilder
import org.infinispan.configuration.cache.*;
ConfigurationBuilder config=new ConfigurationBuilder();
config.indexing().enable().storage(FILESYSTEM).path("/some/folder").addIndexedEntity(Book.class);
import org.infinispan.configuration.cache.*;
ConfigurationBuilder config=new ConfigurationBuilder();
config.indexing().enable().storage(FILESYSTEM).path("/some/folder").addIndexedEntity(Book.class);
1.1.1. インデックス設定 リンクのコピーリンクがクリップボードにコピーされました!
Data Grid 設定は、インデックスの保存および構築方法を制御します。
1.1.1.1. インデックスストレージ リンクのコピーリンクがクリップボードにコピーされました!
Data Grid がインデックスを保存する方法を設定できます。
- ホストファイルシステム上。これはデフォルトであり、再起動間でインデックスを保持します。
-
JVM ヒープメモリー。これはインデックスが再起動後も存続しないことを意味します。
インデックスは、小さなデータセットの場合にのみ、JVM ヒープメモリーに格納する必要があります。
ファイルシステム
<distributed-cache>
<indexing storage="filesystem" path="${java.io.tmpdir}/baseDir">
<!-- Indexing configuration goes here. -->
</indexing>
</distributed-cache>
<distributed-cache>
<indexing storage="filesystem" path="${java.io.tmpdir}/baseDir">
<!-- Indexing configuration goes here. -->
</indexing>
</distributed-cache>
JVM ヒープメモリー
<distributed-cache>
<indexing storage="local-heap">
<!-- Additional indexing configuration goes here. -->
</indexing>
</distributed-cache>
<distributed-cache>
<indexing storage="local-heap">
<!-- Additional indexing configuration goes here. -->
</indexing>
</distributed-cache>
1.1.1.2. インデックスリーダー リンクのコピーリンクがクリップボードにコピーされました!
インデックスリーダーは、クエリーを実行するためにインデックスへのアクセスを提供する内部コンポーネントです。インデックスのコンテンツが変更されると、Data Grid はリーダーを更新し、検索結果が最新の状態になるようにする必要があります。インデックスリーダーの更新間隔を設定できます。デフォルトでは、インデックスが最終更新以降に変更された場合、各クエリーの前に Data Grid はインデックスを読み取ります。
1.1.1.3. インデックスライター リンクのコピーリンクがクリップボードにコピーされました!
インデックスライターは、パフォーマンスを改善するために時間の経過とともにマージできる 1 つ以上のセグメント (サブインデックス) で設定されるインデックスを構築する内部コンポーネントです。インデックスリーダーの操作では、すべてのセグメントを考慮する必要があるため、通常、セグメントが少ないということは、クエリー中のオーバーヘッドが少ないことを意味します。
Data Grid は Apache Lucene を内部的に使用し、メモリーとストレージという 2 つの層でエントリーにインデックスを付けます。新規エントリーは、最初にメモリーインデックスに移動してから、フラッシュが実行されると、設定されたインデックスストレージに移動します。定期的なコミット操作は、フラッシュしたデータからセグメントを作成し、すべてのインデックス変更を永続化します。
index-writer 設定は任意です。デフォルトはほとんどの場合に機能するはずであり、カスタム設定はパフォーマンスを調整するためにのみ使用する必要があります。
| 属性 | 説明 |
|---|---|
|
| メモリーにバッファーリングされたインデックスの変更がインデックスストレージにフラッシュされ、コミットが実行される時間 (ミリ秒単位)。操作にはコストがかかるため、小さな値は避けてください。デフォルトは 1000 ミリ秒 (1 秒) です。 |
|
|
インデックスストレージにフラッシュされる前に、インメモリーにバッファーリングできるエントリーの最大数。値が大きくなると、インデックスが高速になりますが、より多くのメモリーが使用されます。 |
|
|
追加されたエントリーと削除をインデックスストレージにフラッシュする前にバッファーリングするために使用できるメモリーの最大量。値が大きくなると、インデックスが高速になりますが、より多くのメモリーが使用されます。インデックス作成のパフォーマンスを向上させるには、 |
|
| インデックスへの書き込み操作を実行するスレッドの数。 |
|
|
それぞれのインデックス化されたタイプに使用する内部キューの数。各キューは、インデックスに適用される変更のバッチを保持し、キューは並行して処理されます。キューの数を増やすと、インデックスのスループットが増えますが、ボトルネックが CPU である場合に限ります。最適な結果を得るには、 |
|
|
各キューが保持できる要素の最大数。 |
|
| インデックス化操作の低レベルのトレース情報を有効にします。この属性を有効にすると、パフォーマンスが大幅に低下します。この低レベルのトレースは、トラブルシューティングの最後のリソースとしてのみ使用する必要があります。 |
Data Grid がインデックスセグメントをマージする方法を設定するには、index-merge サブ要素を使用します。
| 属性 | 説明 |
|---|---|
|
| インデックスセグメントがマージする前に持つことができるエントリーの最大数。この数を超えるエントリーを持つセグメントはマージされません。値を小さくすると、頻繁に変更されるインデックスでのパフォーマンスが向上します。値を大きくすると、インデックスが頻繁に変更されない場合に検索パフォーマンスが向上します。 |
|
| 一度にマージされるセグメントの数。値が小さいほど、マージが頻繁に発生し、より多くのリソースが使用されますが、セグメントの総数は平均して少なくなり、検索パフォーマンスが向上します。より大きな値 (10 より大きい値) は、大量の書き込みシナリオに最適です。 |
|
| バックグラウンドマージのセグメントの最小ターゲットサイズ (MB 単位)。このサイズよりも小さなセグメントは積極的にマージされます。値が大きすぎると、頻度は低くなりますが、マージ操作のコストが高くなる可能性があります。 |
|
|
バックグラウンドマージのセグメントの最大サイズ (MB 単位)。このサイズよりも大きなセグメントは、バックグラウンドでマージされることはありません。これを低い値に設定すると、メモリー要件が軽減され、最適な検索速度を犠牲にして、一部のマージ操作が回避されます。インデックスを強制的にマージする場合、この属性は無視され、代わりに |
|
|
強制マージのセグメントの最大サイズ (MB 単位) で、 |
|
|
セグメントのエントリーをカウントする際に、インデックスで削除されたエントリーの数が考慮されるかどうか。 |