更新时间:2024-10-21 GMT+08:00
查看元数据
您可以通过创建采集任务、手动添加、导入模板等方式获取元数据库表清单。
通过采集任务获取元数据
创建采集任务的方法请参考创建并运行元数据同步任务。当元数据同步任务的实例状态为“已完成”且采集结果有数值时,在库表清单页签可以查看采集到的元数据列表。
手动添加数据表
- 登录迁移中心管理控制台。
- 在左侧导航栏选择“调研>大数据血缘”,进入大数据血缘页面。在页面左上角的当前项目下拉列表中选择迁移项目。
- 在元数据采集区域,单击“查看库表清单”,进入元数据采集页面的库表清单页签。
- 单击“新增数据表”按钮,弹出新增数据表窗口。
- 根据表1,配置参数。
表1 新增数据表参数说明 参数
说明
元数据连接
根据实际需求,选择已创建的元数据连接类型。
数据库名
用户自定义。
数据表名
用户自定义。
源表路径(可选)
元数据连接为Delta时,为必填项。
输入源端数据表在数据库中的存放路径。
目标表路径(可选)
元数据连接为Delta(无元数据)时,为必填项。
输入目的端数据表在数据库中的存放路径。
分区信息(可选)
用户自定义。
是否分区表(可选)
根据实际需求,选择该表是否为分区表。
业务负责人(可选)
可以指定数据表所属业务的责任人。
分析责任人(可选)
可以指定数据表的分析责任人。
跨源表
根据实际需求设置。设为跨源表后不再显示该表一致性校验结果。
说明(可选)
您可以输入用于数据表的说明。
- 参数配置完成后,单击“确认”按钮,完成数据表新增。在库表清单列表中可以查看新增的数据表。
批量导入数据表
- 登录迁移中心管理控制台。
- 在左侧导航栏选择“调研>大数据血缘”,进入大数据血缘页面。在页面左上角的当前项目下拉列表中选择迁移项目。
- 在元数据采集区域,单击“查看库表清单”,进入元数据采集页面的库表清单页签。
- 单击“导入数据表”按钮,弹出导入数据表窗口。
- 根据实际需求,选择已创建的元数据连接类型。
- 单击“模板下载”,将导入模板下载到本地。打开导入模板,将需要添加的数据表对应参数填写到模板内。
- 每个模板最多支持导入10,000张表。
- 待导入的表必须属于同一个元数据来源。
- 元数据连接为Delta(有元数据)连接时,模板中的source_path参数为必填项。
- 元数据连接为Delta(无元数据)连接时,模板中的source_path和target_path参数为必填项。
- 模板参数填写完成并保存后,单击导入窗口的“添加文件”按钮,将填写后的模板文件上传。
- 上传成功后,单击“确认”按钮,系统开始导入,并且会在任务实例管理页签中的任务实例列表中,新增一条导入数据表的任务实例记录。您可以通过任务实例查看导入状态。
父主题: 采集元数据