迁移后数据一致性验证 场景描述 图1 迁移场景 主要包括云上和云下的MySQL数据迁移，支持整库迁移或者单表迁移，本文以云下MySQL的整库迁移为例。 云下MySQL数据迁移： CDM 通过公网IP访问MySQL数据库，CDM与 GaussDB (DWS)在同一个VPC下，CDM分别与MySQL和DWS建立JDBC连接。

查看更多 →

mysqlbinlog工具使用方法 本章节介绍mysqlbinlog工具的使用方法，用于本地解析Binlog。 Binlog的基本组成单元是binlog_event，同时server是以二进制的格式写入Binlog文件，所以如果想通过文本格式显示Binlog内容，需要mysqlb

查看更多 →

mysqlbinlog工具使用方法 本章节介绍mysqlbinlog工具的使用方法，用于本地解析Binlog。 Binlog的基本组成单元是binlog_event，同时server是以二进制的格式写入Binlog文件，所以如果想通过文本格式显示Binlog内容，需要mysqlb

查看更多 →

件来设计和配置ETL流程。支持多种数据源和目标，包括关系型数据库、文件、API、Hadoop等。Kettle提供了丰富的转换和清洗功能，可以对数据进行格式转换、数据过滤、数据合并、数据计算等操作。 它的主要功能如下： 无代码拖拽式构建数据管道。 多数据源对接。 数据管道可视化。·

查看更多 →

数据如何存储到GaussDB(DWS)？ GaussDB(DWS)支持多数据源高效入库，典型的入库方式如下所示。详细指导请参见导入数据。 从OBS导入数据。 数据上传到OBS 对象存储服务 中，再从OBS中导入，支持 CS V，TEXT格式数据。 通过INSERT语句直接插入数据。 用户

查看更多 →

业务的数据库迁移场景，全量迁移将非系统数据库的全部数据库对象和数据一次性迁移至目标端数据库，包括：表、视图、存储过程、触发器等。 说明： 如果用户只进行全量迁移时，建议停止对源数据库的操作，否则迁移过程中源数据库产生的新数据不会同步到目标数据库。 全量+增量：该模式为数据库持续性

查看更多 →

RDS for MySQL迁移到DDM 概述 资源规划 操作流程 源端RDS for MySQL准备 目标端DDM准备 创建和配置VPN网络 创建DRS迁移任务 确认迁移执行结果 父主题： 实时迁移

查看更多 →

MySQL->GaussDB(for MySQL)实时迁移和同步 全量或增量阶段失败报错，关键词“Illegal mix of collations (utf8mb4_0900_ai_ci,IMPLICIT) and (utf8mb4_general_ci,IMPLICIT) for

查看更多 →

跨 服务器 迁移（rclone工具） 方案概述 用户可以将本地NAS存储中的数据，使用rclone工具通过公网或内网迁移至云上SFS Turbo中，进行云上业务拓展。 此方案通过在云上和本地分别创建一台Linux操作系统的服务器，将本地NAS存储中的数据迁移至云上。两台 服务器端口 号2

查看更多 →

支持使用rcp、rsh、ssh等方式来配合传输文件。 支持实现增量迁移，即只迁移发生变化的数据。 如果存在迁移多层级目录且小文件数量较多的情况时，rsync迁移效率将会非常低，建议使用多进程脚本解决或rclone工具迁移。 前提条件 已经完成云专线的购买和配置，详情请参考《云专线服务用户指南》。

查看更多 →

mysqlbinlog工具使用方法 本章节介绍mysqlbinlog工具的使用方法，用于本地解析binlog。 binlog的基本组成单元是binlog_event，同时server是以二进制的格式写入binlog文件，所以如果想通过文本格式显示binlog内容，需要mysqlb

查看更多 →

大数据数据迁移 使用须知 准备工作 创建源端连接 创建目的端连接 迁移实施 查看并导出执行结果 自定义参数说明

查看更多 →

大数据数据迁移 数据迁移失败，提示超过 DLI 网管流控上限 部分表迁移失败，报错：CRC Check failed 部分表迁移失败，报错：no more field nodes for for field %s and vector %s

查看更多 →

Turbo文件系统的通信，并通过这台服务器将本地NAS存储中的数据迁移至云上。 将云上NAS存储数据迁移至SFS Turbo文件系统中也可以参考本方案，具体说明请参考云上NAS数据迁移至高性能弹性文件服务。 约束与限制 仅支持使用Linux系统的 云服务器 进行数据迁移。 文件UID和GID在同步操作后将不再保持一致。

查看更多 →

使用GDS-Kafka工具迁移数据至GaussDB(DWS)集群 概述 实例管理 连接管理 映射管理 作业管理 父主题： 迁移业务数据至GaussDB(DWS)集群

查看更多 →

场景一：数据中心自建MySQL迁移到DDM 场景介绍 企业当前使用数据中心自建MySQL，希望能使用DDM将数据进行分布式存储。 迁移过程中可能会出现业务中断情况，中断时长与迁移数据量大小、网络情况相关。 迁移示意图 图1 数据中心自建MySQL迁移到DDM示意图 约束限制 目标DDM实例、RDS

查看更多 →

分布式GaussDB(for MySQL)数据库管理（开发工具） 首页 SQL操作 库管理 帐号管理

查看更多 →

迁移介绍 数据迁移指将原有数据库中的数据迁移到DDM服务中，或因为业务使用需要，将DDM服务的数据导出到其他数据库系统中使用。您可以使用MySQL官方工具mysqldump进行数据全量导出，当您需要全量迁移+增量迁移时，建议您使用数据复制服务（Data Replication Service，简称DRS）服务。

查看更多 →

入口路径：控制台 > 数据开发 单击“数据开发”，进入数据开发的界面 新建Spark SQL脚本 图10 数据开发1 选择数据连接和数据库 图11 数据开发2 添加表头注释 设置脚本参数 开发增转全脚本 增转全规则：通过增量时间戳获取180天的增量数据，然后将增量数据和180天前的数据进行整合，存放在新生成的分区里。

查看更多 →

撑更丰富的大数据处理需求。 数据迁移最佳实践 迁移Hive数据至DLI，具体请参考迁移Hive数据至DLI。 迁移Kafka数据至DLI，具体请参考迁移Kafka数据至DLI。 迁移Elasticsearch数据至DLI，具体请参考迁移Elasticsearch数据至DLI。 迁

查看更多 →

管理数据迁移 任务授权 元数据迁移 权限迁移 元数据发现

查看更多 →