如何将Mycat数据整库迁移至DDM

操作场景

本章节主要介绍将Mycat中的数据整库迁移到DDM中。

• 迁移过程中可能会出现业务中断情况，中断时长与迁移数据量大小、网络情况相关。
• 数据迁移是一项比较复杂的操作，建议在业务量较低时进行。本实践仅供参考，您需要根据自己业务场景、数据量、停机时间要求等情况，设计合适的迁移方案。
• 由于DDM仅支持通过弹性云服务器（ECS）访问，因此需要先将数据库导出为文件到ECS，然后从ECS将文件中的数据导入到DDM。

迁移前准备

• 准备可以访问Mycat、目标DDM实例和目标DDM实例关联的RDS实例的ECS。
  1. 确保Mycat、目标DDM实例和目标DDM实例关联的RDS实例都在同一个VPC下，保证网络互通。
  2. 部署Mycat的ECS、目标DDM实例和目标DDM实例关联的RDS实例的安全组建议配置相同，如果不同则需要放开对应端口访问。
  3. ECS已安装MySQL官方客户端，MySQL客户端版本建议为5.6或5.7。
     • Redhat系列Linux安装命令：yum install mysql mysql-devel
     • Debian系列Linux安装命令：apt install mysql-client-5.7 mysql-client-core-5.7
  4. ECS磁盘空间足够存放临时转储文件；ECS内存空间足够，可以用来比较转储文件。

• 准备已关联RDS实例的DDM实例，并配置DDM帐号、DDM逻辑库等相关信息。
• 本章节以Mycat 1.6版本进行迁移为例。

迁移策略

Mycat与DDM数据表类型不同，迁移策略也有所差异，详情如表1所示。

约束限制

• 为了保持数据完整性，需要先停止Mycat业务后再进行数据迁移。
• 该场景不支持通过DDM关联Mycat关联的RDS进行数据关联，需要将Mycat数据导出后再导入到DDM完成数据迁移。
• 目标DDM关联的RDS版本与Mycat关联数据库的版本需要保持一致。

从Mycat导出数据表结构

1. 登录ECS。
2. 执行如下命令导出Mycat数据中的表结构数据，其中斜体变量参数需根据实际情况配置，详细参数说明如表2所示。

   mysqldump -h {DB_ADDRESS} -P {DB_PORT} -u {DB_USER} -p   --skip-lock-tables --add-locks=false --set-gtid-purged=OFF --no-data --order-by-primary {DB_NAME} > {mysql_schema.sql}
   Enter password: **********

   表2 参数解释

   参数	说明	备注
   DB_ADDRESS	待导出数据的数据库连接地址。	必填
   DB_PORT	数据库侦听端口	必填
   DB_USER	数据库用户	必填
   DB_NAME	数据库名称	必填
   mysql_schema.sql	生成的表结构文件名。	每次导出表结构时文件名不同。 建议以“逻辑库名”+“_”+“schema”格式命名，以免数据被覆盖。如mysql_schema.sql。
   mysql_data.sql	生成的整库数据文件名。	-

从Mycat整库导出数据

1. 登录ECS。
2. 执行如下命令导出Mycat整库数据，其中斜体变量参数需根据实际情况配置，详细参数说明如表2所示。

   mysqldump -h {DB_ADDRESS} -P {DB_PORT} -u {DB_USER} -p   --hex-blob --complete-insert --skip-lock-tables --add-locks=false --set-gtid-purged=OFF --quick --no-create-info --order-by-primary {DB_NAME} > {mysql_data.sql}
   Enter password: **********

3. 导出完成后，在ECS上执行如下命令可查看导出的.sql文件。

   ls -l

将数据导入至目标DDM（非拆分表场景）

在ECS上采用MySQL客户端直连目标DDM关联的RDS，直接执行以下命令导入表结构文本文件和数据文件。

mysql -f -h {RDS_ADDRESS} -P {RDS_PORT} -u {RDS_USER} -p {DB_NAME} < {mysql_table_schema.sql}
Enter password: **********
mysql -f -h {RDS_ADDRESS} -P {RDS_PORT} -u {RDS_USER} -p {DB_NAME} < {mysq_table_data.sql}
Enter password: **********

将数据导入至目标DDM（拆分表、广播表场景）

mysql -f -h {DDM_ADDRESS} -P {DDM_PORT} -u {DDM_USER} -p {DB_NAME} < {mysql_data.sql}
Enter password: **********