cdm
配置DIS源端参数
更新时间:2020/12/22 GMT+08:00
目前仅支持从DIS导出数据到云搜索服务、Apache Kafka、DMS Kafka。
消息体中的数据是一条类似CSV格式的记录,可以支持多种分隔符。不支持二进制格式或其他格式的消息内容解析。
参数 |
说明 |
取值样例 |
---|---|---|
DIS通道 |
DIS的通道名。 |
dis |
偏移量参数 |
设置从DIS拉取数据时的初始偏移量:
|
最新 |
是否持久运行 |
用户自定义是否永久运行。设置为长久运行的任务,如果DIS系统发生中断,任务也会失败结束。 |
是 |
DIS分区ID |
DIS分区ID,该参数支持输入多个分区ID,使用英文逗号(,)分隔。 |
0,1,2 |
数据格式 |
解析数据时使用的格式:
|
二进制格式 |
字段分隔符 |
默认为空格,使用Tab键作为分隔符请输入“\t”。 |
, |
最大消息数/poll |
可选参数,每次向DIS请求数据限制最大请求记录数。 |
100 |
APP名字 |
配置用户数据消费程序的唯一标识符,不存在时会自动创建。 |
cdm |
父主题: 配置作业源端参数
