本实践主要介绍如何通过数据复制服务（DRS）将不同Region的RDS for MySQL的数据迁移到DDM实例单库中，包含了如何在华为云创建RDS for MySQL、DDM实例，如何通过VPN网络进行数据迁移等内容。 前提条件 拥有华为账号。 账户余额大于等于0元。 服务列表 虚拟私有云 VPC

查看更多 →

将Spark作业结果存储在MySQL数据库中，缺少pymysql模块，如何使用python脚本访问MySQL数据库？ 缺少pymysql模块，可以查看是否有对应的egg包，如果没有，在“程序包管理”页面上传pyFile。具体步骤参考如下： 将egg包上传到指定的OBS桶路径下。 登录 DLI 管理控制台，单击“数据管理

查看更多 →

DRS是否支持只迁移表结构不迁移数据 MySQL迁移、同步、灾备任务怎么迁移账号，是否支持修改密码 影响DRS任务速度的因素有哪些以及如何进行耗时预估 DRS任务支持修改对象吗 DRS是否支持同一实例不同库之间的同步 源或者目标数据库哪些操作，会影响DRS任务状态 数据订阅与MySQL到Kafka同步的区别

查看更多 →

使用DRS将DDM数据同步到RDS for MySQL数据库。 将DDM同步到RDS for MySQL GaussDB 分布式版 任何 一次性或持续 最低 使用DRS将GaussDB分布式版数据同步到RDS for MySQL数据库。 将GaussDB分布式版同步到RDS for MySQL GaussDB主备版

查看更多 →

新增更新emoji表情数据报错Error 1366。 新增索引长度限制导致修改varchar长度失败。 新增建表时timestamp字段默认值无效。 新增自增属性AUTO_INCREMENT为什么未在表结构中显示。 新增存储过程和相关表字符集不一致导致执行缓慢。 新增RDS MySQL报错ERROR

查看更多 →

级数据复制能力，实现生产环境到测试环境数据快速的复制能力问题。 方案架构 该解决方案部署架构如下图所示： 图1 方案架构 该解决方案会部署如下资源： 根据源数据库实例的规格创建目标数据库云数据库 RDS for MySQL实例，用于存储源数据库实例中的数据。 创建数据复制服务 D

查看更多 →

如何将华为云上或本地的数据库备份文件恢复到RDS实例 华为云上的RDS备份文件恢复到实例 通过RDS备份文件的恢复功能，将备份文件数据恢复到实例上。具体请参见恢复备份。 本地的MySQL备份文件恢复到实例 通过数据复制服务的实时迁移功能，将云下MySQL数据库迁移到RDS，具体请参见入云迁移。

查看更多 →

全量同步对象类型 全量同步对象类型，可选同步表结构、同步数据、同步索引，根据实际需求进行选择要同步内容。 同步数据为必选项。 选择同步表结构的时候目标库不能有同名的表。 不选同步表结构的时候目标库必须有相应的表，且要保证表结构与所选表结构相同。 DML同步 选择需要同步的DML操作，默认都勾选。

查看更多 →

异构型数据库之间由于格式不同，不支持直接导入导出。但只要导入导出的格式数据兼容，理论上，导入表数据也是可行的。 异构型数据库之间数据导入导出，一般需要使用Ugo或第三方软件，通过数据复制的方式来实现。比如，先使用工具从Oracle中，以文本的格式导出表记录，然后利用Load语句导入到云数据库GaussDB(for

查看更多 →

业务库不允许存在空账号或者空密码。 业务数据库须开启GTID。 业务数据库名称在1到64个字符之间，由小写字母、数字、中划线、下划线组成，不能包含其他特殊字符。 业务数据库中的表名、视图名不能包含：'<>/\以及非ASCII字符。 业务数据库中表结构的列名不能以\字符结尾。 数据库expire_log

查看更多 →

从MySQL CDC源表读取数据写入到DWS 本指导仅适用于Flink 1.12版本。 场景描述 CDC是变更数据捕获（Change Data Capture）技术的缩写，它可以将源数据库的增量变动记录，同步到一个或多个数据目的中。CDC在数据同步过程中，还可以对数据进行一定的处理，例如分组（GROUP

查看更多 →

辑复制权限。 不支持同步openGauss间隔分区表、中文名称表。 源端openGauss数据库中的表如果不存在主键，则不支持delete该表的数据。 如果源端openGauss数据库存在delete数据操作，则需要开启全字段补全功能，命令如下： 查询openGauss表复制标识的命令为：

查看更多 →

业务数据库名称在1到64个字符之间，由小写字母、数字、中划线、下划线组成，不能包含其他特殊字符。 灾备中，不支持业务库在自增主键列上写入0值，否则会造成该自增列的数据在业务库和灾备库不一致。 业务数据库中的表名、视图名不能包含：'<>/\以及非ASCII字符。 业务数据库中表结构的列名不能以\字符结尾。

查看更多 →

复制数据集到其它工作空间 创建同类型数据集时，通过“复制到工作空间”功能，可快速复制数据集到目标工作空间，减少重复操作，提升开发效率。 复制数据集到其它工作空间 参考登录AstroCanvas界面中操作，登录AstroCanvas界面。 在主菜单中，选择“数据中心”。 在左侧导航栏中，选择“数据集

查看更多 →

全量同步对象类型，可选同步表结构、同步数据，根据实际需求进行选择要同步内容。 同步数据为必选项。 选择同步表结构的时候目标库不能有同名的表。 不选同步表结构的时候目标库必须有相应的表，且要保证表结构与所选表结构相同。 增量阶段冲突策略 该冲突策略特指增量同步中的冲突处理策略，默认选择覆盖；全量阶段的冲突默认忽略。

查看更多 →

于集群中不同的broker上，副本的数量不能超过broker的数量，否则创建topic时会失败。 同步到kafka partition策略 同步到kafka partition策略。 按库名+表名的hash值投递到不同Partition：适用于单表的查询场景，表内保序，表与表之间

查看更多 →

ectTimeout异常时，考虑增大该值。 表2 增量阶段优化参数 参数名 类型 默认值 说明 debezium.max.queue.size int 8192 数据缓存队列条数，默认为8192，当源表中单条数据过大时（如1MB），缓存过多数据会导致内存溢出，可以考虑减小该值。 debezium

查看更多 →

迁移介绍 数据迁移指将原有数据库中的数据迁移到DDM服务中，或因为业务使用需要，将DDM服务的数据导出到其他数据库系统中使用。您可以使用MySQL官方工具mysqldump进行数据全量导出，当您需要全量迁移+增量迁移时，建议您使用数据复制服务（Data Replication Service，简称DRS）服务。

查看更多 →

MySQL)，通过公网网络，将源数据库迁移到目标端，部署架构可参考图1。 图1 部署架构图 服务列表 虚拟私有云 VPC 云数据库 GaussDB(for MySQL) 数据复制服务 DRS 使用说明 本实践的资源规划仅作为演示，实际业务场景资源以用户实际需求为准。 本实践端到端的数据为测试数据，

查看更多 →

数据恢复到某一个时间点。 如果是恢复的时间点前最新一次全量备份之后创建的库表，默认无法选中，可选择“最新库表”获取最新库表信息。 如果需要恢复的库表已不存在或被误删，需要先登录数据库并创建同名库表，然后在“最新库表”中选择该库表进行恢复。 库表恢复只会恢复指定的表，操作时请确认已选中所有需要恢复的表。

查看更多 →

全量同步对象类型，可选同步表结构、同步数据、同步索引，根据实际需求进行选择要同步内容。 同步数据为必选项。 选择同步表结构的时候目标库不能有同名的表。 不选同步表结构的时候目标库必须有相应的表，且要保证表结构与所选表结构相同。 由于GaussDB(DWS)的表结构具有业务逻辑，建议结

查看更多 →