在线迁移方式

场景描述

在满足源Redis和目标Redis的网络相通、源Redis未禁用SYNC和PSYNC命令这两个前提下，使用在线迁移的方式，将源Redis中的数据全量迁移或增量迁移到目标Redis中。

• 如果源Redis禁用了SYNC和PSYNC命令，请务必放通后再执行在线迁移，否则迁移失败，选择DCS Redis实例进行在线迁移时，会自动放开SYNC命令。
• 进行在线迁移时，建议将源端实例的参数repl-timeout配置为300秒，client-output-buffer-limit配置为实例最大内存的20%。

在线迁移过程中，在源端执行FLUSHDB、FLUSHALL命令不会同步到目标端。

对业务影响

在线迁移，相当于增加一个从节点并且会做一次全量同步，所以，建议在业务低峰期迁移。

前提条件

• 在迁移之前，请先阅读使用DCS迁移介绍，了解当前DCS支持的在线迁移能力，选择适当的目标实例。
• 如果是单机/主备实例迁移到集群实例，由于目标集群实例只有一个DB，请先确保源Redis实例DB0以外的DB是否有数据，如果有，建议先将数据使用开源Rump工具迁移到DB0，否则会出现迁移失败，具体迁移操作请参考使用Rump在线迁移。

步骤1：获取源Redis的信息

• 当源端为云服务Redis时，需获取准备迁移的源Redis实例的名称。
• 当源端为自建Redis时，需获取准备迁移的源Redis实例的IP和端口，或者域名和端口。

步骤2：准备目标Redis实例

• 如果您还没有目标Redis，请先创建，创建操作，请参考创建Redis实例。
• 如果您已有目标Redis，则不需要重复创建，但在迁移之前，您需要清空实例数据。清空操作，请参考清空Redis实例数据。

  如果没有清空，如果存在与源Redis实例相同的key，迁移后，会覆盖目标Redis实例原来的数据。

步骤3：检查网络

• 配置在线迁移任务时，如果选择的源Redis或目标Redis为“云服务Redis”，则界面上要求所选云服务Redis必须与迁移任务处于相同的VPC，否则可能导致迁移任务无法连接所选云服务Redis实例。
• 特殊场景下，如果提前打通了迁移任务与所选云服务Redis实例间跨VPC访问，则可不用满足所选云服务Redis与迁移任务处于相同VPC的约束。

在创建在线迁移任务时，与源Redis、目标Redis间网络要求可参考表1。

步骤4：创建在线迁移任务

1. 登录分布式缓存服务管理控制台。
2. 在管理控制台左上角单击，选择区域和项目。
3. 单击左侧菜单栏的“数据迁移”。页面显示迁移任务列表页面。
4. 单击右上角的“创建在线迁移任务”。进入创建在线迁移任务页面。
5. 设置迁移任务名称和描述。
6. 配置在线迁移任务虚拟机资源的VPC、子网和安全组。

   创建在线迁移任务时，需要选择迁移虚拟机资源的VPC和安全组，并确保迁移资源能访问源Redis和目标Redis实例。

   

   • 创建迁移任务会占用一个租户侧IP，即控制台上迁移任务对应的“迁移机IP”。如果源端Redis或目标端Redis配置了白名单，需确保配置了迁移IP或关闭白名单限制。
   • 迁移任务所选安全组的“出方向规则”需放通源端Redis和目标端Redis的IP和端口（安全组默认情况下为全部放通，则无需单独放通），以便迁移任务的虚拟机资源能访问源Redis和目标Redis。

7. 单击“立即创建”。
8. 单击“提交”，创建在线迁移任务成功。

配置在线迁移任务

1. 创建完在线迁移任务之后，在“在线迁移”的列表，单击“配置”，配置在线迁移的源Redis、目标Redis等信息。
2. 选择迁移方法。

   从其他云Redis到DCS Redis的数据迁移，支持全量迁移＋增量迁移，全量迁移及增量迁移的功能及限制如表2所示。

   表2 在线迁移方法说明

   迁移类型	描述
   全量迁移	该模式为Redis的一次性迁移，适用于可中断业务的迁移场景。全量迁移过程中，如果源Redis有数据更新，这部分更新数据不会被迁移到目标Redis。
   全量迁移＋增量迁移	该模式为Redis的持续性迁移，适用于对业务中断敏感的迁移场景。增量迁移阶段通过解析日志等技术， 持续保持源Redis和目标端Redis的数据一致。 增量迁移，迁移任务会在迁移开始后，一直保持迁移中状态，不会自动停止。需要您在合适时间，在“操作”列单击“停止”，手动停止迁移。停止后，源端数据不会造成丢失，只是目标端不再写入数据。增量迁移在传输链路网络稳定情况下是秒级时延，具体的时延情况依赖于网络链路的传输质量。

   图1 选择迁移方法
   

3. 当迁移方法选择“全量迁移+增量迁移”时，支持选择是否启用“带宽限制”。

   启用带宽限制功能，当数据同步速度达到带宽限制时，将限制同步速度的继续增长。

4. 选择是否“自动重连”。

   如开启自动重连模式，迁移过程中在遇到网络等异常情况时，会无限自动重连。

5. 分别配置源Redis和目标Redis。
   1. Redis类型，支持“云服务Redis”和“自建Redis”，需要根据迁移场景选择数据来源。
      • 云服务Redis：DCS Redis实例，需要选择与迁移任务处于相同VPC的DCS Redis服务。
      • 自建Redis：其他云厂商、本地数据中心自行搭建的Redis，需要输入Redis的连接地址。
      

      当源Redis和目标Redis属于DCS不同Region，则打通网路后，目标Redis实例无论是自建Redis或DCS Redis实例，在“目标Redis实例”区域，只能选中自建Redis，输入实例相关信息。

   2. 如果是密码访问模式实例，在输入连接实例密码后，您可以单击密码右侧的“测试连接”，检查实例密码是否正确、网络是否连通。如果是免密访问的实例，请直接单击“测试连接”。

6. 单击“下一步”。
7. 确认迁移信息，然后单击“提交”，开始创建迁移任务。

   可返回迁移任务列表中，观察对应的迁移任务的状态，迁移成功后，任务状态显示“成功”。

   

   • 如果是增量迁移，迁移任务会在迁移开始后，一直保持迁移中状态，直到您在“操作”列单击“停止”，手动停止迁移。
   • 数据迁移后，目标端与源端重复的Key会被覆盖。

迁移后验证

迁移完成后，请使用redis-cli连接源Redis和目标Redis，确认数据的完整性。

1. 连接源Redis和目标Redis。
2. 输入info keyspace，查看keys参数和expires参数的值。

   

3. 对比源Redis和目标Redis的keys参数分别减去expires参数的差值。如果差值一致，则表示数据完整，迁移正常。

注意：如果是全量迁移，迁移过程中源Redis更新的数据不会迁移到目标实例。