更新时间:2024-10-21 GMT+08:00

查看元数据

您可以通过创建采集任务、手动添加、导入模板等方式获取元数据库表清单。

通过采集任务获取元数据

创建采集任务的方法请参考创建并运行元数据同步任务。当元数据同步任务的实例状态为“已完成”且采集结果有数值时,在库表清单页签可以查看采集到的元数据列表。

手动添加数据表

  1. 登录迁移中心管理控制台。
  2. 在左侧导航栏选择“调研>大数据血缘”,进入大数据血缘页面。在页面左上角的当前项目下拉列表中选择迁移项目
  3. 元数据采集区域,单击“查看库表清单”,进入元数据采集页面的库表清单页签。
  4. 单击“新增数据表”按钮,弹出新增数据表窗口。
  5. 根据表1,配置参数。

    表1 新增数据表参数说明

    参数

    说明

    元数据连接

    根据实际需求,选择已创建的元数据连接类型。

    数据库名

    用户自定义。

    数据表名

    用户自定义。

    源表路径(可选)

    元数据连接为Delta时,为必填项。

    输入源端数据表在数据库中的存放路径。

    目标表路径(可选)

    元数据连接为Delta(无元数据)时,为必填项。

    输入目的端数据表在数据库中的存放路径。

    分区信息(可选)

    用户自定义。

    是否分区表(可选)

    根据实际需求,选择该表是否为分区表。

    业务负责人(可选)

    可以指定数据表所属业务的责任人。

    分析责任人(可选)

    可以指定数据表的分析责任人。

    跨源表

    根据实际需求设置。设为跨源表后不再显示该表一致性校验结果。

    说明(可选)

    您可以输入用于数据表的说明。

  6. 参数配置完成后,单击“确认”按钮,完成数据表新增。在库表清单列表中可以查看新增的数据表。

批量导入数据表

  1. 登录迁移中心管理控制台。
  2. 在左侧导航栏选择“调研>大数据血缘”,进入大数据血缘页面。在页面左上角的当前项目下拉列表中选择迁移项目
  3. 元数据采集区域,单击“查看库表清单”,进入元数据采集页面的库表清单页签。
  4. 单击“导入数据表”按钮,弹出导入数据表窗口。
  5. 根据实际需求,选择已创建的元数据连接类型。
  6. 单击“模板下载”,将导入模板下载到本地。打开导入模板,将需要添加的数据表对应参数填写到模板内。

    • 每个模板最多支持导入10,000张表。
    • 待导入的表必须属于同一个元数据来源。
    • 元数据连接为Delta(有元数据)连接时,模板中的source_path参数为必填项。
    • 元数据连接为Delta(无元数据)连接时,模板中的source_pathtarget_path参数为必填项。

  7. 模板参数填写完成并保存后,单击导入窗口的“添加文件”按钮,将填写后的模板文件上传。
  8. 上传成功后,单击“确认”按钮,系统开始导入,并且会在任务实例管理页签中的任务实例列表中,新增一条导入数据表的任务实例记录。您可以通过任务实例查看导入状态。