文档首页 > > 用户指南> 操作指南> 准备数据

准备数据

分享
更新时间: 2019/07/18 GMT+08:00

CS中需要输入数据源和数据输出通道,即常说的Source和Sink。用户使用其他服务作为数据源或输出通道时,需要先开通相应服务。

CS服务支持以下数据源和输出通道:

  • DIS数据源和输出通道

    如果用户作业需要DIS作为数据源和输出通道时,则要先开通数据接入服务(DIS),为CS服务提供数据源和输出通道。

    用户如何开通DIS服务,具体操作请参见《数据接入服务用户指南》中的开通DIS通道章节。

    申请DIS通道后,用户可以将本地数据通过DIS通道不断上传至DIS服务,实现向CS服务提供实时流数据源,具体操作请参见《数据接入服务用户指南》中的发送数据到DIS服务章节。

    样例数据如下所示:

    1,lilei,bmw320i,28
    2,hanmeimei,audia4,27
  • OBS数据源

    如果用户作业需要对象存储服务(OBS)作为数据源,则要先开通OBS服务,具体操作请参见《对象存储服务控制台指南》中的开通OBS服务章节。

    开通OBS服务后,用户需要将本地文件通过Internet上传至OBS指定的位置,具体操作请参见《对象存储服务控制台指南》中的上传文件章节。

  • RDS输出通道

    如果用户作业需要RDS作为输出通道,需要创建RDS实例,具体操作请参见《关系型数据库快速入门》“购买实例”章节。

  • SMN输出通道

    如果用户作业需要SMN作为输出通道,需要先在SMN中创建主题,获取URN资源标识,再添加订阅。具体操作请参见《消息通知服务快速入门》

  • Kafka数据源和输出通道

    如果用户作业需要Kafka作为数据源和输出通道,则必须要通过VPC服务的对等连接功能将CS服务与Kafka进行对接,具体操作请参见对等连接

    如果Kafka服务端的端口监听在hostname上,则需要将Kafka Broker节点的hostname和ip的对应关系添加到CS集群中。如何添加,请参见添加IP域名映射

  • CloudTable数据源和输出通道

    如果用户作业需要CloudTable作为数据源和输出通道,需要先在CloudTable中创建集群,获取集群ID。具体操作请参见《表格存储服务用户指南》中的入门章节。

  • 云搜索服务输出通道

    如果用户作业需要云搜索服务作为输出通道,需要先在云搜索服务中创建集群,获取集群内网访问地址。具体操作请参见《云搜索服务用户指南》中的入门章节。

  • DCS输出通道

    如果用户作业需要DCS作为输出通道,需要先在DCS中创建Redis类型的缓存实例,获取Redis实例连接地址。具体操作请参见《分布式缓存服务用户指南》中的入门章节。

分享:

    相关文档

    相关产品

文档是否有解决您的问题?

提交成功!

非常感谢您的反馈,我们会继续努力做到更好!

反馈提交失败,请稍后再试!

*必选

请至少选择或填写一项反馈信息

字符长度不能超过200

提交反馈 取消

如您有其它疑问,您也可以通过华为云社区问答频道来与我们联系探讨

智能客服提问云社区提问