更新时间:2024-08-30 GMT+08:00

数据集成配置数据搬迁

当前管理中心支持直接搬迁数据集成组件中的CDM作业及其中的连接数据。

您可以通过管理中心配置数据搬迁进行搬迁,也可以参考本章节通过CDM组件的导入导出功能进行搬迁。

数据集成数据搬迁依赖于CDM的批量导入导出作业功能。

CDM上支持导出的数据包括配置的连接和作业,可以导出到本地保存。

约束与限制

  • 数据集成中的集群配置、环境变量等数据不支持导入导出,如有需要,请您进行手动配置同步。
  • 由于安全原因,CDM不会将对应数据源的连接密码导出。因此在重新导入前,需要通过手工编辑导出的JSON文件补充密码或在导入窗口配置密码。
  • 从本地导入JSON文件时,导入文件大小不能超过1MB。

旧空间导出作业和连接

请您登录控制台首页,选择并进入旧工作空间的“数据集成”模块,然后执行如下操作进行批量导出。

  1. 在CDM主界面,单击左侧导航上的“集群管理”,单击集群“操作”列的“作业管理”,进入到“表/文件迁移”界面。
  2. 单击作业列表上方的“导出”按钮,准备导出连接和作业。

    图1 批量导出

  3. 在弹出的窗口中,选择“全部作业和连接”,单击“确认”,导出所有作业和连接。

    图2 全部导出

  4. 导出成功后,通过浏览器下载地址,获取到导出的JSON文件。

新空间导入作业和连接

请您登录控制台首页,选择并进入新工作空间的“数据集成”模块,然后执行如下操作进行批量导入。

  1. 在CDM主界面,单击左侧导航上的“集群管理”,单击集群“操作”列的“作业管理”,进入到“表/文件迁移”界面。
  2. 单击作业列表上方的“导入”按钮,准备导入JSON文件。

    图3 批量导入

  3. 在弹出的窗口中,选择导出作业获取的JSON文件,上传JSON文件。

    图4 选择JSON文件

  4. JSON文件上传成功后,单击“设置密码”,配置数据连接的密码或SK。

    图5 进入设置密码

  5. 在设置密码弹窗中,依次输入各数据连接的密码或SK,完成后单击确认,回到导入作业界面。

    图6 设置密码

  6. 在导入作业界面,单击确认,开始导入。

    图7 开始导入

  7. 导入完成后,界面会显示导入情况。如果存在导入失败的情况,请您根据系统报错原因提示,调整后重新导入。

搬迁后验证

在新空间的作业和连接导入完成后,您可以在新空间查看并验证作业和连接是否与旧空间一致,以确保导入成功。