cdm_endpoint MySQL数据库 IP地址 本地的MySQL数据库的IP地址，且该地址允许 CDM 通过公网IP访问。 1xx.120.85.24 端口 MySQL数据库的端口。 3306 数据库名称 待导出数据的MySQL数据库名称。 DB_name 用户名 访问MySQL数据库的用户，该用户

查看更多 →

date Date timestamp DateTime 数据比较任务 数据比对即是对源端数据库中的数据和目标端Hive中的数据作数据一致性校验，如果数据不一致，CDL可以尝试修复不一致的数据。相关操作请参见创建CDL数据比较任务作业。 父主题： 使用CDL

查看更多 →

数据集成普通任务 FDI各类数据库支持哪些数据类型？ 跟踪号是什么，能跟踪到数据吗？ FDI任务是否支持清空目标表？ FDI任务只能采集单张表到单张表吗？ 用户创建的FDI任务，同一账号的其他用户可见吗？ FDI通过公网对接其他租户的 MRS HIVE如何配置？ 从OBS解析文件到

查看更多 →

查看数据集成任务 概述 数据集成任务创建后，您可以查看任务的相关信息，包括任务的配置信息、运行日志、操作日志和调度日志等。 您也可以修改任务的配置，修改任务的操作跟创建任务类似，具体配置说明可参见创建数据集成任务。 请谨慎修改您的任务配置信息，避免目标端出现脏数据或者数据集成不完

查看更多 →

数据集成API概览 表1 数据集成API类型 类型 说明 集群管理 集群管理类型接口。 作业管理 作业管理类型接口。 连接管理 连接管理类型接口。 集群管理 表2 集群管理 API 说明 流控策略 查询集群详情 查询集群详情接口。 cdm_common 删除集群 删除集群接口。 cdm_b

查看更多 →

数据集成任务管理 查看数据集成任务 导入导出数据集成任务 附录：QuartZ Cron表达式配置说明 父主题： 数据集成指导

查看更多 →

使用Import工具导入数据 使用Import工具，可以导入HBase的SequenceFile数据文件到CloudTable的HBase中。Import工具是客户端工具安装包中自带的一个工具。 SequenceFile文件是指使用Export工具从HBase导出的数据文件。 准备一

查看更多 →

使用CopyTable工具导入数据 CopyTable是HBase提供的一个实用工具，可以将部分或全部表复制到同一个集群或另一个集群中。目标表必须预先存在。在CloudTable客户端工具中已经包含了CopyTable工具，用户部署客户端工具后，即可使用CopyTable工具导入数据到CloudTable集群。

查看更多 →

配置Kafka数据均衡工具 操作场景 该任务指导管理员根据业务需求，在客户端中执行Kafka均衡工具来均衡Kafka集群的负载，一般用于节点的退服、入服以及负载均衡的场景。 本章节内容适用于MRS 3.x及后续版本。3.x之前版本请参考均衡Kafka扩容节点后数据 前提条件 MR

查看更多 →

配置Kafka数据均衡工具 操作场景 该任务指导管理员根据业务需求，在客户端中执行Kafka均衡工具来均衡Kafka集群的负载，一般用于节点的退服、入服以及负载均衡的场景。 前提条件 MRS集群管理员已明确业务需求，并准备一个Kafka管理员用户（属于kafkaadmin组，普通模式不需要）。

查看更多 →

集成 简介 集成PC端应用到ISDP+系统 集成大屏应用到ISDP+系统 集成移动端应用到ISDP+ Mobile系统 接入端侧设备到ISDP+系统 父主题： 用户指南

查看更多 →

ClickHouse数据入库工具 最佳实践方案 ClickHouse数据加工流程最佳实践：在数据湖中通过Hive&Spark（批量）/FlinkSQL（增量）加工成大宽表后，通过CDL/Loader工具实时同步到ClickHouse，下游BI工具和应用进行实时OLAP分析。 数据加工 建议

查看更多 →

华为云帮助中心，为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档，帮助您快速上手使用华为云服务。

查看更多 →

工具 SQL诊断 SQL探针 表诊断 智能分布列推荐 父主题： 在监控面板(DMS)查看 GaussDB (DWS)集群监控

查看更多 →

4个子网分别供给数据接入、数据存储计算、数据服务、数据应用使用。 图2 服务部署设计 完成网络规划后，可根据网络架构展开细化部署架构。 数据集成设计 在数据集成中，针对不同场景可以选择不同的数据集成技术栈。以下是一些常见的数据集成技术栈及其适用场景： 批量数据集成：使用CDM，适

查看更多 →

启停数据集成任务 概述 数据集成任务创建后，“任务状态”为“停止”状态，此时任务不会执行，需先启动任务。 定时任务启动后，ROMA Connect按照任务计划进行数据集成。首次执行时，会把所有符合条件的源端数据集成到目标端，后续根据任务配置，集成符合条件的全量数据或只集成增量数据。

查看更多 →

业将合作伙伴所需数据和信息上传到ROMA Connect，根据合作伙伴的要求转换数据格式，集成数据。企业完成数据和消息的集成之后，合作伙伴可以访问ROMA Connect获取相关信息。 图1 集团应用与数据集成 通过ROMA Connect完成集团应用与数据集成会给企业带来这些优势：

查看更多 →

数据集成开发指导 开发说明 连接器RESTful接口规范 自定义数据源开发示例（定时任务） 自定义数据源开发示例（实时任务）

查看更多 →

数据集成组合任务 源数据库重启等操作对组合任务是否有影响？ 如何修复意外重启等原因导致的XStream模式Oracle CDC功能异常？ 父主题： 数据集成

查看更多 →

Connect集成数据的过程。 使用ROMA Connect集成数据的步骤如下所示： 步骤一：准备数据源 步骤二：接入数据源 步骤三：创建数据集成任务 步骤四：启动数据集成任务 步骤五：查看数据集成结果 步骤一：准备数据源 在使用ROMA Connect进行数据集成前，您需要准备

查看更多 →

的源端数据集成到目标端，后续若检测到新增数据，则将其集成到目标端。 定时任务启动后，ROMA Connect按照任务计划进行数据集成。首次执行时，会把所有符合条件的源端数据集成到目标端，后续根据任务配置，集成符合条件的全量数据或只集成增量数据。 启动数据集成任务。 在数据集成任务

查看更多 →