数据探查接入采用 CDM 工具将业务源端数据迁移至DWS数据库的数据接入方式，开展数据的探查与分析活动，该方法具备安全稳定与灵活复用的特性。 数据探查实施采用平台采集与手动分析相结合的方式，首先在数管平台的“数据资产”模块中，创建元数据采集作业，勾选“数据概要”配置，对数据概要信息进

查看更多 →

数据集成（实时作业） 实时作业概述 支持的数据源 使用前自检概览 网络打通 新建实时集成作业 配置实时集成作业 实时集成任务运维 字段类型映射关系 任务性能调优 使用教程

查看更多 →

数据集成应用示例 本节通过cURL调用CDM API，迁移本地MySQL数据库中的数据到云上服务DWS为例，介绍使用CDM API的基本流程。 获取token 获取用户的token，因为在后续的请求中需要将token放到请求消息头中作为认证。 创建CDM集群 如果您已经创建过CD

查看更多 →

数据集成（CDM作业） 数据集成概述 约束与限制 支持的数据源 创建并管理CDM集群 在CDM集群中创建连接 在CDM集群中创建作业 时间宏变量使用解析 优化迁移性能 关键操作指导 使用教程 常见错误码参考

查看更多 →

按照如下步骤将MySQL中的4张原始数据表，依次迁移到 MRS Hive中。 配置作业vertex_user_rds2hive。 源端的“表名”选择在新建OBS到MySQL迁移作业中迁移到MySQL的vertex_user，目的端的“表名”选择在创建MRS Hive标准数据表中创建的vertex

查看更多 →

数据集成（CDM作业） CDM与其他数据迁移服务有什么区别，如何选择？ CDM有哪些优势？ CDM有哪些安全防护？ 如何降低CDM使用成本？ CDM未使用数据传输功能时，是否会计费？ 已购买包年包月的CDM套餐包，为什么还会产生按需计费的费用？ 如何查看套餐包的剩余时长？ CDM可以跨账户使用吗？

查看更多 →

相关参数。脏数据是指与目的端字段不匹的数据，该数据可以被记录到指定的OBS桶中。用户配置脏数据归档后，正常数据可以写入目的端，迁移作业不会因脏数据中断。在本示例中，“OBS桶”配置为在准备数据源中的桶fast-demo，您需要前往OBS控制台，在fast-demo桶中单击“新建文

查看更多 →

名称 连接的名称，根据连接的数据源类型，用户可自定义便于记忆、区分的连接名。 dws_link 数据库 服务器 单击输入框后的“选择”，可获取用户的DWS实例列表。 - 端口 配置为要连接的数据库的端口。DWS数据库端口默认为8000。 8000 数据库名称 配置为要连接的数据库名称。

查看更多 →

CDL数据集成概述 CDL是一种简单、高效的数据实时集成服务，能够从各种OLTP数据库中抓取Data Change事件，然后推送至Kafka中，最后由Sink Connector消费Topic中的数据并导入到大数据生态软件应用中，从而实现数据的实时入湖。 CDL服务包含了两个重要

查看更多 →

数据集成普通任务 FDI各类数据库支持哪些数据类型？ 跟踪号是什么，能跟踪到数据吗？ FDI任务是否支持清空目标表？ FDI任务只能采集单张表到单张表吗？ 用户创建的FDI任务，同一账号的其他用户可见吗？ FDI通过公网对接其他租户的MRS HIVE如何配置？ 从OBS解析文件到

查看更多 →

在监控调度页面中可根据任务状态和任务名称筛选要查看的任务的状态、调度模式、调度周期以及最近执行时间等信息等。 组合任务还可以查看重置同步进度，读取表的全量数据时间及等信息。 单击任务上的“调度日志”，可查看该任务的详细调度日志。 您可以设置“查询调度时间范围”，查看指定时间段的调度日志。 您可以单击右侧的“”（详细模

查看更多 →

上云与实施 上云迁移服务 数据要素集成与实施服务 鲲鹏移植专家服务 鲲鹏测评专家服务 云原生专家服务 微服务专家服务 ROMA集成专业服务 SAP上云专业服务 智能数据专家服务 数据运营专家服务 CSS 专家服务 交通智能体 专家服务 数据仓库 专家服务 云视频交付实施服务 数据库迁移服务 计算增值服务

查看更多 →

查询所有可用区 查询CDM集群的所有可用区。 cdm_common 查询支持的版本 查询CDM集群支持的版本。 cdm_c 查询版本规格 按版本ID查询所有兼容规格。 cdm_common 查询规格详情 查询指定规格ID的规格详情。 cdm_common 查询所有集群的企业项目ID 查询当前项目下的所有集群的企业项目ID。

查看更多 →

数据集成任务管理 查看数据集成任务 导入导出数据集成任务 附录：QuartZ Cron表达式配置说明 父主题： 数据集成指导

查看更多 →

数据集成（离线作业） 离线作业概述 支持的数据源 新建离线处理集成作业 配置离线处理集成作业 配置作业源端参数 配置作业目的端参数 字段转换器配置指导 新增字段操作指导

查看更多 →

数据集成（实时作业） 问题案例总览 数据源和资源组网络不通如何排查？ 数据源安全组放通哪些端口可满足Migration访问？ 如何配置Hudi Compaction的Spark周期任务？ MySQL到DWS实时同步中，同步新增列的DDL时报错怎么办？ MySQL到DWS实时同步中

查看更多 →

数据仓库上云与实施服务 产品介绍 常见问题 计费说明 父主题： 上云与实施

查看更多 →

图解数据仓库服务

查看更多 →

传输中的数据保护 传输中数据保护指在数据传输（发往和离开消息通知服务时）期间保护数据。 向消息通知服务发送消息时，您可以使用Https协议请求消息通知服务接口进行传输加密。消息通知服务向外部系统发送消息时，也支持Https协议发送消息。 父主题： 数据保护技术

查看更多 →

传输中的数据保护 数据传输到标签管理服务内部数据库的过程中使用加密协议。此部分用户不可配置。 调用标签管理服务接口时，标签管理服务支持HTTP和HTTPS两种传输协议，为保证数据传输的安全性，推荐您使用更加安全的HTTPS协议。 父主题： 数据保护技术

查看更多 →

台对接数据仓库过程中遇到的问题咨询和解答（限于华为产品已验证过的第三方产品）。 应用联调与上线支持：在应用与生产环境数据仓库的正式对接联调时，由于测试环境与生产环境的本质差异，生产环境易出现测试环境未能遭遇的问题，协助处理未知问题。 国产化改造：在数据仓库国产化转型过程中，提供数

查看更多 →