292.3. URI 形式

現在、Spark コンポーネントはプロデューサーのみをサポートします。Spark ジョブを呼び出して結果を返すことを目的としています。RDD、データフレーム、または Hive SQL ジョブを呼び出します。

Spark URI 形式

spark:{rdd|dataframe|hive}

Apache Spark コンポーネントは、以下に示す 3 つのオプションをサポートします。

Name	説明	デフォルト	Type
rdd (producer)	計算対象である RDD。		JavaRDDLike
rddCallback (producer)	RDD に対するアクションの実行関数。		RddCallback
resolveProperty Placeholders (advanced)	起動時にコンポーネント自体がプロパティープレースホルダーを解決するかどうか。String タイプのプロパティーのみがプロパティープレースホルダーを使用できます。	true	boolean

Apache Spark エンドポイントは、URI 構文を使用して設定します。

spark:endpointType

以下の path パラメーターおよびクエリーパラメーターを使用します。