314.3. URI 格式


目前,Spark 组件只支持 producers - 它旨在调用 Spark 作业和返回结果。您可以调用 RDD、数据帧或 Hive SQL 作业。

spark URI 格式

spark:{rdd|dataframe|hive}

314.3.1. spark 选项

Apache Spark 组件支持 3 个选项,如下所列。

Expand
Name描述默认值类型

rdd (producer)

RDD 到计算.

 

JavaRDDLike

rddCallback (producer)

对 RDD 执行操作的功能。

 

RddCallback

resolveProperty Placeholders (advanced)

组件是否应在启动时解析属性占位符。只有 String 类型的属性可以使用属性占位符。

true

布尔值

Apache Spark 端点使用 URI 语法进行配置:

spark:endpointType

使用以下路径和查询参数:

314.3.2. 路径参数(1 参数):

Expand
Name描述默认值类型

endpointType

端点 所需的 类型(rdd、dataframe、hive)。

 

EndpointType

314.3.3. 查询参数(6 参数):

Expand
Name描述默认值类型

collect (producer)

指明是否应收集或计算结果。

true

布尔值

dataFrame (producer)

DataFrame 以计算.

 

Dataset

dataFrameCallback (producer)

对 DataFrame 执行操作的功能。

 

DataFrameCallback

rdd (producer)

RDD 到计算.

 

JavaRDDLike

rddCallback (producer)

对 RDD 执行操作的功能。

 

RddCallback

同步 (高级)

设置是否应严格使用同步处理,还是允许 Camel 使用异步处理(如果支持)。

false

布尔值

Red Hat logoGithubredditYoutubeTwitter

学习

尝试、购买和销售

社区

關於紅帽

我们提供强化的解决方案,使企业能够更轻松地跨平台和环境(从核心数据中心到网络边缘)工作。

让开源更具包容性

红帽致力于替换我们的代码、文档和 Web 属性中存在问题的语言。欲了解更多详情,请参阅红帽博客.

关于红帽文档

Legal Notice

Theme

© 2026 Red Hat
返回顶部