313.3. URI 格式

目前,Spark 组件仅支持制作者 - 它旨在调用 Spark 作业和返回结果。您可以调用 RDD、数据框架或 Hive SQL 作业。

spark URI 格式

spark:{rdd|dataframe|hive}

313.3.1. spark 选项

Apache Spark 组件支持 3 个选项,它们如下。

名称描述默认类型

rdd (producer)

用于计算的 RDD,

 

JavaRDDLike

rddCallback (producer)

针对 RDD 执行操作的功能.

 

RddCallback

resolveProperty Placeholders (advanced)

启动时,组件是否应自行解析属性占位符。只有 String 类型的属性才能使用属性占位符。

true

布尔值

Apache Spark 端点使用 URI 语法进行配置:

spark:endpointType

使用以下路径和查询参数: