313.3. URI 格式
目前,Spark 组件仅支持制作者 - 它旨在调用 Spark 作业和返回结果。您可以调用 RDD、数据框架或 Hive SQL 作业。
spark URI 格式
spark:{rdd|dataframe|hive}
spark:{rdd|dataframe|hive}
313.3.1. spark 选项 复制链接链接已复制到粘贴板!
复制链接链接已复制到粘贴板!
Apache Spark 组件支持 3 个选项,它们如下。
名称 | 描述 | 默认 | 类型 |
---|---|---|---|
rdd (producer) | 用于计算的 RDD, | JavaRDDLike | |
rddCallback (producer) | 针对 RDD 执行操作的功能. | RddCallback | |
resolveProperty Placeholders (advanced) | 启动时,组件是否应自行解析属性占位符。只有 String 类型的属性才能使用属性占位符。 | true | 布尔值 |
Apache Spark 端点使用 URI 语法进行配置:
spark:endpointType
spark:endpointType
使用以下路径和查询参数: