数据集成（离线作业） 离线作业概述 支持的数据源 新建离线处理集成作业 配置离线处理集成作业 配置作业源端参数 配置作业目的端参数 字段转换器配置指导 新增字段操作指导

查看更多 →

数据集成（实时作业） 实时作业概述 支持的数据源 使用前自检概览 网络打通 新建实时集成作业 配置实时集成作业 实时集成任务运维 字段类型映射关系 任务性能调优 使用教程

查看更多 →

数据集成（实时作业） 问题案例总览 数据源和资源组网络不通如何排查？ 数据源安全组放通哪些端口可满足Migration访问？ 如何配置Hudi Compaction的Spark周期任务？ MySQL到DWS实时同步中，同步新增列的DDL时报错怎么办？ MySQL到DWS实时同步中

查看更多 →

Studio服务进入数据集成界面可以看到。 进入 DataArts Studio 数据集成主页面，单击操作列的“作业管理”。 图2 作业管理 在作业管理界面，选择“连接管理 - 新建连接”，进入创建连接页面。 在创建连接页面，选择“ 对象存储服务 （OBS）”，新建 CDM 到OBS的连接，数据连接名称为“obs_link”。

查看更多 →

周期性数据集成。DataArts Studio基础包中已经包含一个数据集成的集群，如果无法满足业务需求，在购买DataArts Studio基础包实例后，您可以根据实际需求购买批量数据迁移增量包。 购买数据集成增量包的具体操作请参考购买批量数据迁移增量包章节。 新建数据集成连接

查看更多 →

步骤3：数据集成 本章节将介绍如何使用DataArts Studio数据集成将源数据批量迁移到云上。 创建集群 批量数据迁移集群提供数据上云和数据入湖的集成能力，全向导式配置和管理，支持单表、整库、增量、周期性数据集成。DataArts Studio基础包中已经包含一个数据集成的集群

查看更多 →

数据集成（CDM作业） CDM与其他数据迁移服务有什么区别，如何选择？ CDM有哪些优势？ CDM有哪些安全防护？ 如何降低CDM使用成本？ CDM未使用数据传输功能时，是否会计费？ 已购买包年包月的CDM套餐包，为什么还会产生按需计费的费用？ 如何查看套餐包的剩余时长？ CDM可以跨账户使用吗？

查看更多 →

CDL数据集成概述 CDL是一种简单、高效的数据实时集成服务，能够从各种OLTP数据库中抓取Data Change事件，然后推送至Kafka中，最后由Sink Connector消费Topic中的数据并导入到大数据生态软件应用中，从而实现数据的实时入湖。 CDL服务包含了两个重要

查看更多 →

数据集成应用示例 本节通过cURL调用CDM API，迁移本地MySQL数据库中的数据到云上服务DWS为例，介绍使用CDM API的基本流程。 获取token 获取用户的token，因为在后续的请求中需要将token放到请求消息头中作为认证。 创建CDM集群 如果您已经创建过CD

查看更多 →

导入导出数据集成任务 概述 数据集成任务创建后，您可以通过导入导出功能，导入或导出数据集成任务。如果数据集成任务关联子任务，在任务导入后需要重新配置子任务信息。 导出数据集成任务 登录ROMA Connect控制台，在“实例”页面单击实例上的“查看控制台”，进入实例控制台。 在左侧的导航栏选择“数据集成

查看更多 →

启停数据集成任务 概述 数据集成任务创建后，“任务状态”为“停止”状态，此时任务不会执行，需先启动任务。 定时任务启动后，ROMA Connect按照任务计划进行数据集成。首次执行时，会把所有符合条件的源端数据集成到目标端，后续根据任务配置，集成符合条件的全量数据或只集成增量数据。

查看更多 →

描述 填写任务的描述信息。 集成模式 选择数据集成的模式。 定时：指数据集成任务根据任务计划，在指定的时间执行任务，将源端数据集成到目标端。 实时：指数据集成任务不断检测源端数据的变更，并实时将新增的数据集成到目标端。 使用Kafka作为源端数据源时仅支持实时任务，此处选择“实时”。

查看更多 →

数据集成组合任务 源数据库重启等操作对组合任务是否有影响？ 如何修复意外重启等原因导致的XStream模式Oracle CDC功能异常？ 父主题： 数据集成

查看更多 →

业将合作伙伴所需数据和信息上传到ROMA Connect，根据合作伙伴的要求转换数据格式，集成数据。企业完成数据和消息的集成之后，合作伙伴可以访问ROMA Connect获取相关信息。 图1 集团应用与数据集成 通过ROMA Connect完成集团应用与数据集成会给企业带来这些优势：

查看更多 →

数据集成开发指导 开发说明 连接器RESTful接口规范 自定义数据源开发示例（定时任务） 自定义数据源开发示例（实时任务）

查看更多 →

数据集成平台应用部署 将部署文件上传到 服务器 /usr/local/下，解压target4.0.tar tar -zxvf target4.0.tar 说明：需要java环境 检查环境：java -vrsion 图1 解压 进入/usr/local/target4.0/bin下启动服务；启动命令：

查看更多 →

数据集成组合任务 目标表中配置的RowId字段类型不正确导致写入数据失败 读取MySQL的binlog时报“binlog probably contains events generated with statement or mixed based replication forma”错误

查看更多 →

创建数据集成任务（编排任务） 配置编排任务流程 配置源端数据信息 配置目标端数据信息 配置映射规则 父主题： 数据集成指导

查看更多 →

创建数据集成任务（组合任务） 配置Oracle CDC（LogMiner） 配置Oracle CDC（XStream） 配置MySQL CDC（Binlog） 配置SQL Server CDC 创建组合任务 父主题： 数据集成指导

查看更多 →

创建数据集成任务（普通任务） 配置任务基本信息 配置源端数据信息 配置目标端数据信息 配置数据映射规则 配置异常数据存储（可选） 配置任务完成后执行（可选） 父主题： 数据集成指导

查看更多 →

Studio工作空间的角色成员，且该空间角色成员需要拥有数据开发、管理中心服务的类管理员或开发者权限，用于查看、创建与操作数据连接、数据集成任务，角色的权限说明请参见权限列表。 配置 DLI 云服务跨源场景委托权限。 实时数据集成与数据湖探索（DLI）云服务底层使用统一纳管集群资源，首次

查看更多 →