8.2.2. 分散 Kafka Connect でのコネクターの設定
HTTP REST インターフェース
分散 Kafka Connect のコネクターは、HTTP REST インターフェースを使用して設定されます。REST インターフェースはデフォルトで 8083 番ポートでリッスンします。以下のエンドポイントをサポートします。
GET /connectors
- 既存のコネクターのリストを返します。
POST /connectors
- コネクターを作成します。リクエストボディーはコネクター設定を持つ JSON オブジェクトである必要があります。
GET /connectors/<name>
- 特定のコネクターに関する情報を取得します。
GET /connectors/<name>/config
- 特定のコネクターの設定を取得します。
PUT /connectors/<name>/config
- 特定のコネクターの設定を更新します。
GET /connectors/<name>/status
- 特定のコネクターのステータスを取得します。
PUT /connectors/<name>/pause
- コネクターとそのすべてのタスクを一時停止します。コネクターはすべてのメッセージの処理を停止します。
PUT /connectors/<name>/resume
- 一時停止されたコネクターを再開します。
POST /connectors/<name>/restart
- コネクターが失敗したら、コネクターを再起動します。
DELETE /connectors/<name>
- コネクターを削除します。
GET /connector-plugins
- サポートされるコネクタープラグインをすべて取得します。
コネクター設定
ほとんどの設定オプションはコネクター固有で、コネクターのドキュメントに含まれています。以下のフィールドはすべてのコネクターで共通です。
name
- コネクターの名前。指定の Kafka Connect インスタンス内で一意である必要があります。
connector.class
-
コネクタープラグインのクラス。たとえば、
org.apache.kafka.connect.file.FileStreamSinkConnector
のようになります。 tasks.max
- このコネクターによって使用されるタスクの最大数。タスクは、作業を並行して行うためにコネクターによって使用されます。Connetors は、指定した数よりも少ないタスクを作成できます。
key.converter
-
メッセージキーの Kafka 形式への変換に使用されるクラス。これにより、Kafka Connect 設定によって設定されたデフォルト値が上書きされます。例:
org.apache.kafka.connect.json.JsonConverter
value.converter
-
メッセージペイロードの Kafka 形式への変換に使用されるクラス。これにより、Kafka Connect 設定によって設定されたデフォルト値が上書きされます。例:
org.apache.kafka.connect.json.JsonConverter
さらに、シンクコネクターに以下のオプションのいずれかを設定する必要があります。
topics
- 入力として使用されるトピックのコンマ区切りリスト。
topics.regex
- 入力として使用するトピックの Java 正規表現。
その他のオプションは、特定のコネクターのドキュメントを参照してください。
AMQ Streams には、コネクター設定ファイルのサンプルが含まれています。AMQ Streams のインストールディレクトリーでは、config/connect-file-sink.properties
および config/connect-file-source.properties
を参照してください。