Hudi及 DLI 做源端时，不支持获取样值功能。 SQLServer作为目的端数据源时，不支持timestamp类型字段的写入，需修改为其他时间类型字段写入（如datetime）。 当作业源端为OBS、迁移 CS V文件时，并且配置“解析首行为列名”参数的场景下显示列名。 当使用二进制格式进行文件到文件的迁移时，没有字段映射这一步。

查看更多 →

任务性能调优 性能调优概述 作业任务参数调优 MySQL同步到 MRS Hudi MySQL同步到DWS MySQL同步到DMS Kafka DMS Kafka同步到OBS Apache Kafka同步到MRS Kafka SQLServer同步到MRS Hudi PostgreSQL同步到DWS

查看更多 →

创建备份迁移任务 功能介绍 该接口主要用于三种常见场景下备份迁移任务的配置。 备份迁移支持如下的常见场景： 通过OBS桶备份文件进行全量数据迁移。 通过OBS桶备份文件进行全量+增量数据迁移。 通过RDS全量备份进行全量数据迁移。 URI POST /v5/{project_id

查看更多 →

Hudi及DLI做源端时，不支持获取样值功能。 SQLServer作为目的端数据源时，不支持timestamp类型字段的写入，需修改为其他时间类型字段写入（如datetime）。 当作业源端为OBS、迁移CSV文件时，并且配置“解析首行为列名”参数的场景下显示列名。 当使用二进制格式进行文件到文件的迁移时，没有字段映射这一步。

查看更多 →

Hudi及DLI做源端时，不支持获取样值功能。 SQLServer作为目的端数据源时，不支持timestamp类型字段的写入，需修改为其他时间类型字段写入（如datetime）。 当作业源端为OBS、迁移CSV文件时，并且配置“解析首行为列名”参数的场景下显示列名。 当使用二进制格式进行文件到文件的迁移时，没有字段映射这一步。

查看更多 →

Kafka同步到OBS Apache Kafka同步到MRS Kafka SQLServer同步到MRS Hudi PostgreSQL同步到DWS Oracle同步到DWS Oracle同步到MRS Hudi 父主题： 数据集成（实时作业）

查看更多 →

如果显示测试失败，则需要重复4。 单击“保存”。 如果某个Loader作业已集成一个Loader连接，那么编辑连接参数后可能导致Loader作业运行效果也产生变化。 删除连接 在Loader页面，单击“新建作业”。 单击“连接”后的下拉列表框，选择待删除的连接名称。 单击“删除”。

查看更多 →

配置作业源端参数 配置MySql源端参数 配置Hive源端参数 配置HDFS源端参数 配置Hudi源端参数 配置PostgreSQL源端参数 配置SQLServer源端参数 配置Oracle源端参数 配置DLI源端参数 配置OBS源端参数 配置SAP HANA源端参数 配置Kafka源端参数

查看更多 →

配置作业目的端参数 配置PostgreSQL目的端参数 配置Oracle目的端参数 配置MySQL目的端参数 配置SQLServer目的端参数 配置Hudi目的端参数 配置Hive目的端参数 配置DLI目的端参数 配置ElasticSearch目的端参数 配置DWS目的端参数 配置OBS目的端参数

查看更多 →

迁移 对象存储迁移服务 OMS 主机迁移服务 SMS 父主题： SCP授权参考

查看更多 →

迁移 容器镜像迁移 将K8s集群迁移到CCE

查看更多 →

MySQL同步到DMS Kafka 数据仓库 ：DWS MySQL同步到DWS SQLServer Hadoop：MRS Hudi 说明： 该链路目前需申请白名单后才能使用。如需使用该链路，请联系客服或技术支持人员。 SQLServer同步到MRS Hudi PostgreSQL 数据仓库：DWS

查看更多 →

创建备份迁移任务基本信息体。 target_db_info BackupJobEndpointInfo object 备份迁移任务恢复目标RDS for SQL Server实例信息。 options BackupRestoreOptionInfo object 备份迁移相关配置参数。

查看更多 →

Hive迁移作业长时间卡顿怎么办？ 问题描述 Hive迁移作业长时间卡顿怎么办？ 解决方案 为避免Hive迁移作业长时间卡顿，可手动停止迁移作业后，通过编辑Hive连接增加如下属性设置： 属性名称：hive.server2.idle.operation.timeout 值：10m

查看更多 →

CDM 迁移作业的抽取并发数应该如何设置？ CDM通过数据迁移作业，将源端数据迁移到目的端数据源中。其中，主要运行逻辑如下： 数据迁移作业提交运行后，CDM会根据作业配置中的“抽取并发数”参数，将每个作业拆分为多个Task，即作业分片。 不同源端数据源的作业分片维度有所不同，因此某

查看更多 →

作业 单击“作业”，会展示教师发布的所有作业。 图1 作业列表 作业需在作业提交截⽌时间之前完成，如未在该时间之前提交作业的，系统将在提交截⽌时间到时⾃动提交。 如作业未做答，系统将不⾃动提交； 未批阅或未分配批阅任务的作业，可撤回修改后重新提交。 图2 作业提交 如作业为互评作

查看更多 →

CDM迁移作业的抽取并发数应该如何设置？ CDM通过数据迁移作业，将源端数据迁移到目的端数据源中。其中，主要运行逻辑如下： 数据迁移作业提交运行后，CDM会根据作业配置中的“抽取并发数”参数，将每个作业拆分为多个Task，即作业分片。 不同源端数据源的作业分片维度有所不同，因此某

查看更多 →

Hive目标表mail的数据集成作业，具体如下图所示。 图2 新建作业 图3 配置基本信息 样例作业创建完毕后，如下图查看作业JSON，并复制作业JSON，用于后续数据开发作业配置。 图4 查看作业JSON 图5 复制作业参数 创建数据开发作业 单击工作空间的“数据开发”，进入DataArts

查看更多 →

Hive迁移作业长时间卡顿怎么办？ 问题描述 Hive迁移作业长时间卡顿怎么办？ 解决方案 为避免Hive迁移作业长时间卡顿，可手动停止迁移作业后，通过编辑Hive连接增加如下属性设置： 属性名称：hive.server2.idle.operation.timeout 值：10m

查看更多 →

取值样例 抽取并发数 配置作业抽取并发数，控制将CDM作业拆分为多个Task。 CDM通过数据迁移作业，将源端数据迁移到目的端数据源中。其中，主要运行逻辑如下： 数据迁移作业提交运行后，CDM会根据作业配置中的“抽取并发数”参数，将每个作业拆分为多个Task，即作业分片。 说明： 不同

查看更多 →

Hive目标表mail的数据集成作业，具体如下图所示。 图2 新建作业 图3 配置基本信息 样例作业创建完毕后，如下图查看作业JSON，并复制作业JSON，用于后续数据开发作业配置。 图4 查看作业JSON 图5 复制作业参数 创建数据开发作业 单击工作空间的“数据开发”，进入DataArts

查看更多 →