创建实时同步任务

操作视频

操作流程

准备工作

在进行实时同步前，需要参考如下内容，提前进行华为账号、待同步数据库、数据库连接账号、网络等准备工作。

步骤一：创建同步任务

本步骤是针对准备工作中所举示例进行参数设置及介绍，如果需要了解更多实时同步的使用指导，请参考同步方案概览。

1. 进入创建DRS同步任务页面。
2. 填写基本信息。
   图1 基本信息
   

   参数	示例	参数说明
   计费模式	按需计费	DRS的计费模式。 包年/包月：一种预付费模式，即先付费再使用，按照订单的购买周期进行结算。 按需计费：一种后付费模式，即先使用再付费，按照实际使用时长计费。
   区域	华北-北京四	当前任务所在的区域。
   项目	华北-北京四	当前区域下可以选择的项目。
   任务名称	DRS-Synchronization	同步任务的名称。
   描述	暂不填写	任务描述。

3. 填选同步实例信息。
   图2 同步实例信息
   

   参数	示例	参数说明
   数据流动方向	入云	创建任务的数据流动方向，以华为云数据库为中心进行选择，分为入云、出云和自建-自建。 入云：指目标数据库为华为云数据库实例且需将数据传入的场景。 出云：指源数据库为华为云数据库实例且需将数据传出的场景。 自建-自建：源和目标数据库均不为华为云数据库实例的场景。
   源数据库引擎	MySQL	源数据库的引擎类型。
   目标数据库引擎	MySQL	目标数据库的引擎类型。
   网络类型	公网网络	DRS任务进行数据同步的网络类型。 VPC网络：适合云上同账号同Region同VPC场景下数据库之间的同步。 公网网络：适合通过公网网络把其他云下或其他平台的数据库同步到目标数据库。 VPN、专线网络：适合VPN、专线、CC、VPCEP、或者用户已打通VPC对等连接的网络场景，实现其他云下自建数据库与云上数据库同步、或云上跨Region的数据库之间的同步。
   DRS任务类型	单AZ	选择DRS任务类型，可选“单AZ”和“双AZ”。
   目标数据库实例	rds-mysql	选择目标数据库实例。 目标数据库实例名称为数据库准备中的rds-mysql。
   同步实例所在子网	默认的子网	同步任务所在的子网。
   同步模式	全量+增量	DRS的实时同步任务模式，分为全量+增量、全量、增量三种模式。
   是否开启Binlog快速清理	否	DRS任务运行期间，是否开启目标数据库实例的Binlog快速清理。
   指定公网IP	-	选择DRS实例的公网IP，网络准备中创建的公网IP。

4. 选择规格、可用区。
   图3 选择规格和可用区
   

   参数	示例	参数说明
   规格类型	大	选择DRS实例的规格类型，不同规格类型对应不同性能的性能上限，详细可参考实时同步链路规格说明。
   可用区	可用区1	选择DRS任务创建的可用区。

5. 选择企业项目和标签。
   图4 选择企业项目和标签
   

   参数	示例	参数说明
   企业项目	default	对于已成功关联企业项目的用户，仅需在“企业项目”下拉框中选择目标项目。 更多关于企业项目的信息，请参见《企业管理用户指南》。
   标签	暂不添加	对DRS任务的标识。使用标签可方便管理您的任务。

6. 单击“开始创建”。

   等待5～10分钟后，页面显示“同步实例创建成功”表示DRS任务已创建成功。

7. 在“测试连接”页面，分别测试DRS实例与源库和目标库的连通性。
   1. 在“源库信息”区域填写连接账号准备中的源库信息。
   2. 填写完成后，单击源库信息区域处的“测试连接”。

      当出现“测试连接成功”，表示源库连接通过。

   3. 在“目标库信息”区域填写连接账号准备中的目标库信息。
   4. 填写完成后，单击目标库信息区域处的“测试连接”。

      当出现“测试连接成功”，表示目标库连接通过。

   5. 单击“下一步”。

8. 在“设置同步”页面，选择数据冲突策略和同步对象，单击“下一步”。
   图5 同步模式
   

   参数	示例	参数说明
   流速模式	不限速	选择是否对DRS同步任务限速，默认为不限速。限速模式只对全量阶段生效，增量阶段不生效。
   增量阶段冲突策略	覆盖	选择增量同步阶段数据冲突时的处理策略，全量阶段的冲突默认为忽略。
   过滤DROP DATABASE	否	为了降低同步数据的风险，DRS提供了过滤删除数据库操作的功能。
   对象同步范围	普通索引、增量DDL	选择同步对象的范围类型。
   索引与表结构同时建立	否	全量阶段，是否与表结构同时建立索引。
   DML同步	Insert、Update、Delete	选择需要同步的DML操作，默认都勾选。
   Online DDL	否	对象选择是表级同步场景下，可以选择是否同步Online DDL，默认不同步。
   数据同步拓扑	一对一	数据同步功能支持多种同步拓扑，您可以根据业务需求规划您的同步实例。数据同步拓扑说明可参考数据同步拓扑介绍。
   增量支持DDL	默认值	选择增量阶段需要同步的DDL类型，
   同步对象	表级同步	选择同步对象，可根据用户用户需求选择全部对象同步、表级同步或者库级同步。

9. 在“数据加工”页面，选择是否进行数据加工。
   • 如果需要数据加工，可选择“数据过滤”、“附加列”或“列加工”，参考数据加工章节，设置相关规则。
   • 本示例中选择不进行数据加工，直接单击“下一步”。

10. 在“预检查”页面，进行同步任务预校验，校验是否可进行同步。
    • 如果存在待确认项，需要阅读并确认详情后才可以继续执行。
    • 如果有不通过的检查项，可参考表中内容修复不通过项后，单击“重新校验”按钮重新进行同步任务预校验。

    预检查通过率为100%时表示预检查通过。

11. 单击“下一步”。
12. 在“任务确认”页面，设置同步任务的启动时间。
    图6 任务启动设置
    

    参数	示例	参数说明
    启动时间	立即启动	同步任务的启动时间可以根据业务需求，设置为“立即启动”或“稍后启动”，优选“稍后启动”。
    任务异常通知设置	关闭	该项为可选参数，开启之后，选择对应的SMN主题。当同步任务状态、时延指标、数据等异常时，系统将发送通知。
    任务异常自动结束时间	14	设置任务异常自动结束天数。设置任务异常自动结束天数后，异常且超时的任务将会自动结束。

13. 确认同步任务信息无误后，单击“启动任务”，提交同步任务。
14. 同步任务提交后，您可在“实时同步管理”页面，查看任务状态。
    • 任务状态为“启动中”时，表示任务已正常启动。
    • 对于未启动、状态为配置中的任务，DRS默认保留3天，超过3天DRS会自动删除后台资源，当前任务状态不变。当用户再次配置时，DRS会重新申请资源。

步骤二：查询同步进度

当任务正常启动后，您可以通过DRS提供的同步进度功能来查询数据同步的进展。DRS提供流式进度展示，帮助您在同步过程中实时了解同步进展。

1. 在“实时同步管理”界面，选中指定同步任务，单击任务名称。

   进入“基本信息”页面。

2. 单击“同步进度”页签，查看同步进度。
   • 同步进度：当同步项显示为100%时，表示全量同步完成（百分比是根据同步对象的数量来统计计算的）。
     图7 同步进展
     

   • 同步明细：当“对象数目”和“已同步数目”相等时，表示该对象已经同步完成。
     图8 同步进度明细
     

   • 增量时延：当全量同步完成后，任务进入增量阶段，可查看增量时延。

     时延 = 源库当前系统时间 - 成功同步到目标库的最新一个事务在源库的提交成功时间。

     时延为0代表源和目标瞬时一致，无新的事务需要同步。

步骤三：对比同步项

对于全量+增量迁移任务，当任务全量迁移完成进入增量阶段，并且增量时延为0时，用户可使用数据同步提供的对比功能，确认源和目标数据库的数据是否一致性。

• 对象级对比：对数据库、索引、表、视图、存储过程和函数、表的排序规则等对象进行对比。
• 数据级对比：对同步的表的行数或者表内数据进行一致性检查。

结束任务

当确认源数据库数据全部同步至目标数据库后，可选择结束同步任务。

1. 在“实时同步管理”页面的任务列表中，选择要结束的任务，单击操作列“结束”。
2. 在弹出框中单击“是”，提交结束任务。