CDM 是否支持集群关机功能？ 问题描述 CDM是否支持集群关机功能？ 解决方案 不支持。 从2022年4月开始，CDM已不再支持集群关机功能。当集群关机时，其底层资源可能会被占用，导致集群可能无法正常开机使用。 父主题： 数据集成（CDM作业）

查看更多 →

管理并查看CDM监控指标 CDM支持的监控指标 设置CDM告警规则 查看CDM监控指标 父主题： 创建并管理CDM集群

查看更多 →

方案，提供了简单易用的迁移能力和多种数据源到数据湖的集成能力，降低了客户数据源迁移和集成的复杂性，有效的提高您数据迁移和集成的效率。 CDM服务迁移MySQL数据至 MRS 集群方案如图2所示。 图2 MySQL数据迁移示意 前提条件 已经购买包含有Hive服务的MRS集群。 已获取

查看更多 →

与非全托管服务通信的代理。 数据库名 单击“获取数据库”，在列表框中选择数据库。 填写完数据源信息后，单击“确定”即可完成PostgreSQL数据连接的添加。 使用PostgreSQL数据源 您可以参考使用数据仓库服务（DWS）数据源，配置使用PostgreSQL数据源。 父主题：

查看更多 →

数据迁移服务。CDM通过创建定时作业，将用户自建存储服务器上的文件系统、数据库、对象存储等数据源与华为云OBS进行连接，从而实现定时、自动地将本地数据搬迁至OBS。 图1 CDM方式搬迁数据示意图 创建OBS桶 通过OBS控制台或OBS Browser+创建桶，用于存放原始数据。

查看更多 →

Administrator权限的CDM用户可以创建VPC或子网。 拥有云监控Administrator权限的CDM用户，可以查看CDM集群的监控指标信息。 系统角色 CDM FullAccess CDM管理员权限，拥有CDM服务所有权限。 系统策略 CDM FullAccessExceptEIPUpdating

查看更多 →

配置CDM作业定时任务 在表/文件迁移的任务中，CDM支持定时执行作业，按重复周期分为：分钟、小时、天、周、月。 CDM在配置定时作业时，不要为大量任务设定相同的定时时间，应该错峰调度，避免出现异常。 如果通过 DataArts Studio 数据开发调度CDM迁移作业，此处也配置了

查看更多 →

配置DDS目的端参数 配置Elasticsearch/ 云搜索 服务（ CSS ）目的端参数 配置 DLI 目的端参数 配置MRS Hudi目的端参数 配置MRS ClickHouse目的端参数 配置MongoDB目的端参数 配置Doris目的端参数 父主题： 在CDM集群中创建作业

查看更多 →

一列作为分布列，可能会有数据倾斜风险。 如CDM不支持源端迁移字段类型，请参见不支持数据类型转换规避指导将字段类型转换为CDM支持的类型。 新增字段 您可以单击字段映射界面的选择“添加新字段”自定义新增字段，通常用于标记数据库来源，以确保导入到目的端数据的完整性。 图1 字段映射

查看更多 →

一列作为分布列，可能会有数据倾斜风险。 如CDM不支持源端迁移字段类型，请参见不支持数据类型转换规避指导将字段类型转换为CDM支持的类型。 新增字段 您可以单击字段映射界面的选择“添加新字段”自定义新增字段，通常用于标记数据库来源，以确保导入到目的端数据的完整性。 图1 字段映射

查看更多 →

配置Elasticsearch/云搜索服务（ CS S）目的端参数 配置DLI目的端参数 配置OpenTSDB目的端参数 配置MRS Hudi目的端参数 配置MRS ClickHouse目的端参数 配置MongoDB目的端参数 父主题： 在CDM集群中创建作业

查看更多 →

迁移表全量数据 使用华为云迁移服务CDM完成进行数据迁移。 迁移业务SQL 使用DSC语法迁移工具进行语法改写，使Oracle的业务SQL转换成适配DWS的SQL。 父主题： 使用CDM迁移Oracle数据至 GaussDB (DWS)集群

查看更多 →

使用 云数据迁移 （CDM）集群作为网络代理或者通过公有网络作为连接代理实现。 如果CDM集群作为连接代理，需满足以下要求： 您需要先前往CDM控制台创建一个CDM集群。CDM集群必须和 DLV 在相同的区域。创建CDM集群的具体操作，请参见创建集群。 如果MySQL数据源不在华为云上，

查看更多 →

可以跳过这部分内容。 如果您需要再创建新的CDM集群，请参考购买批量数据迁移增量包，完成购买数据集成增量包的操作。 实例类型：选择“cdm.xlarge”，该实例类型适用大部分迁移场景。 虚拟私有云：CDM集群的VPC，选择用户本地数据中心与云专线连通的VPC。 子网、安全组：这里没有要求，分别任选一个即可。

查看更多 →

体请参考华为云官网价格： 表1 资源和成本规划 华为云服务 配置示例 每月预估花费 数据治理中心 DataArts Studio 区域：华北-北京四 计费模式：包年包月 版本：初级版 规格：cdm.medium 4核 8GB 购买量：1 2000元 数据迁移服务 CDM 按需计费：2

查看更多 →

可以跳过这部分内容。 如果您需要再创建新的CDM集群，请参考购买批量数据迁移增量包，完成购买数据集成增量包的操作。 实例类型：选择“cdm.xlarge”，该实例类型适用大部分迁移场景。 虚拟私有云：CDM集群的VPC，选择用户本地数据中心与云专线连通的VPC。 子网、安全组：这里没有要求，分别任选一个即可。

查看更多 →

使用CDM迁移Oracle数据至GaussDB(DWS)集群 迁移流程 准备工具 迁移表定义 迁移表全量数据 迁移业务SQL 父主题： 数据迁移

查看更多 →

约束与限制 如果待迁移的表数量较多，建议分批次进行迁移。可以按业务分批，也可以按表的数据量分批。 如果在CDM迁移过程中有DELETE、UPDATE操作，无法保证迁移后的数据一致，需要重新迁移。 表的数据量太大，可以切片迁移。 整库迁移作业一次只能迁移一个数据库，如果迁移多个数据库需要配置多个迁移作业。

查看更多 →

使用CDM导入数据到Elasticsearch 云搜索服务支持通过云数据迁移服务CDM的向导式界面，将存储在Oracle数据库或对象存储服务OBS中的数据导入到Elasticsearch或OpenSearch集群中，数据文件支持JSON格式。 表1 使用CDM导入数据至CSS服务 数据导入场景

查看更多 →

数据迁移类 使用CDM服务迁移Hadoop数据至MRS集群 使用CDM服务迁移HBase数据至MRS集群 使用CDM服务迁移Hive数据至MRS集群 使用BulkLoad工具向HBase中批量导入数据 使用CDM服务迁移MySQL数据至MRS Hive 使用CDM服务迁移MRS HDFS数据至OBS

查看更多 →

迁移后数据一致性验证 场景描述 图1 迁移场景 主要包括云上和云下的MySQL数据迁移，支持整库迁移或者单表迁移，本文以云下MySQL的整库迁移为例。 云下MySQL数据迁移： CDM通过公网IP访问MySQL数据库，CDM与GaussDB(DWS)在同一个VPC下，CDM分别与MySQL和DWS建立JDBC连接。

查看更多 →