更新时间:2022-08-17 GMT+08:00
配置Kafka/DMS Kafka源端参数
作业中源连接为配置Kafka连接或配置DMS Kafka连接时,源端作业参数如表1所示。
参数 |
说明 |
取值样例 |
---|---|---|
Topics |
支持单个或多个topic。 |
est1,est2 |
偏移量参数 |
从Kafka拉取数据时的初始偏移量:
|
最新 |
是否持久运行 |
用户自定义是否永久运行。 |
是 |
消费组ID |
用户指定消费组ID。 如果是从DMS Kafka导出数据,专享版请任意输入,标准版请输入有效的消费组ID。 |
sumer-group |
数据格式 |
解析数据时使用的格式:
|
二进制格式 |
字段分隔符 |
默认为空格,使用Tab键作为分隔符请输入“\t”。 |
, |
最大消息数/poll |
可选参数,每次向Kafka请求数据限制最大请求记录数。 |
100 |
最大时间间隔/poll |
可选参数,向Kafka请求数据的最大时间间隔。 |
100 |
父主题: 配置作业源端参数