中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    数据血缘分析如何实现 更多内容
  • 查看数据血缘

    选择左侧导航栏的“运维数据开发 > 数据开发”,进入“数据开发”页面。 单击“数据治理 > 数据血缘”,在数据血缘页面查看具有数据血缘、关系及数量等信息。 父主题: 运维数据开发

    来自:帮助中心

    查看更多 →

  • 查看数据血缘

    查看数据血缘 首先在数据目录组件完成元数据采集任务,当数据开发作业满足自动血缘解析要求或已手动配置血缘,然后成功完成作业调度后,则可以在数据目录模块可视化查看数据血缘关系。 约束限制 数据血缘关系更新依赖于作业调度,数据血缘关系是基于最新的作业调度实例产生的。 对于同一版本的数据

    来自:帮助中心

    查看更多 →

  • 配置数据血缘

    配置数据血缘 DataArts Studio 数据血缘解析方案包含自动分析血缘和手动配置血缘两种方式。一般推荐使用自动血缘解析的方式,无需手动配置即可生成血缘关系,在不支持自动血缘解析的场景下,再手动配置血缘关系。 自动血缘解析,是由系统解析数据开发作业中的数据处理和数据迁移类型节

    来自:帮助中心

    查看更多 →

  • 配置数据血缘

    配置数据血缘 DataArts Studio数据血缘解析方案包含自动分析血缘和手动配置血缘两种方式。一般推荐使用自动血缘解析的方式,无需手动配置即可生成血缘关系,在不支持自动血缘解析的场景下,再手动配置血缘关系。 自动血缘解析,是由系统解析数据开发作业中的数据处理和数据迁移类型节

    来自:帮助中心

    查看更多 →

  • 查看数据血缘

    选择左侧导航栏的“运维数据开发 > 数据开发”,进入“数据开发”页面。 单击“数据治理 > 数据血缘”,在数据血缘页面查看具有数据血缘、关系及数量等信息。 父主题: 运维数据开发

    来自:帮助中心

    查看更多 →

  • 查看数据血缘

    查看数据血缘 首先在数据目录组件完成元数据采集任务,当数据开发作业满足自动血缘解析要求或已手动配置血缘,然后成功完成作业调度后,则可以在数据目录模块可视化查看数据血缘关系。 约束限制 数据血缘关系更新依赖于作业调度,数据血缘关系是基于最新的作业调度实例产生的。 对于同一版本的数据

    来自:帮助中心

    查看更多 →

  • 数据血缘方案概述

    数据血缘关系示例 DataArts Studio数据血缘实现方案 数据血缘的产生: DataArts Studio数据血缘解析方案包含自动分析血缘和手动配置血缘两种方式。一般推荐使用自动血缘解析的方式,无需手动配置即可生成血缘关系,在不支持自动血缘解析的场景下,再手动配置血缘关系。

    来自:帮助中心

    查看更多 →

  • 数据血缘方案概述

    数据血缘关系示例 DataArts Studio数据血缘实现方案 数据血缘的产生: DataArts Studio数据血缘解析方案包含自动分析血缘和手动配置血缘两种方式。一般推荐使用自动血缘解析的方式,无需手动配置即可生成血缘关系,在不支持自动血缘解析的场景下,再手动配置血缘关系。

    来自:帮助中心

    查看更多 →

  • 数据目录如何可视化展示数据血缘?

    数据目录如何可视化展示数据血缘数据血缘数据目录中展示,首先要进行元数据采集,其次需要有相关的作业调度。 数据血缘方案请参见节点数据血缘。 父主题: 数据目录

    来自:帮助中心

    查看更多 →

  • 节点数据血缘

    节点数据血缘 数据血缘方案概述 配置数据血缘 查看数据血缘 父主题: 节点参考

    来自:帮助中心

    查看更多 →

  • 数据血缘、资源管理、函数管理和变量管理

    数据血缘、资源管理、函数管理和变量管理 数据血缘数据采集和数据开发任务中,支持手工配置数据血缘及基于 SQL 解析自动生成数据血缘。在任务发布至生产环境后,即可形成数据血缘影响关系图,直观展示元数据上下游关系,查看到来源于各个相关的数据开发任务的血缘分析、影响分析。 图1 数据血缘

    来自:帮助中心

    查看更多 →

  • 血缘查询

    血缘查询 功能介绍 血缘查询。 调用方法 请参见如何调用API。 URI GET /v3/{project_id}/entities/{guid}/lineage 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID,获取方法请参见项目ID和账号ID。

    来自:帮助中心

    查看更多 →

  • 血缘信息

    血缘信息 无血缘关系表查询 血缘查询 血缘导入 父主题: 数据目录API

    来自:帮助中心

    查看更多 →

  • 血缘导入

    血缘导入 功能介绍 血缘查询。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/lineage/import 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID,获取方法请参见项目ID和账号ID。

    来自:帮助中心

    查看更多 →

  • 如何实现跨区域访问数据

    如何实现跨区域访问数据 打通不同区域间的VPC网络,具体请参考《跨区域同账号VPC互通》或《跨区域跨账号VPC互通》。 在 DLI 中创建增强型跨源链接,绑定队列。具体请参考《增强型跨源连接》。 添加DLI的路由。具体请参考《增强型跨源连接》。 父主题: 跨源分析问题

    来自:帮助中心

    查看更多 →

  • 什么是数据血缘关系?

    可追溯性:数据血缘关系,体现了数据的生命周期,体现了数据从产生到消亡的整个过程,具备可追溯性。 层次性:数据血缘关系是有层次的。对数据的分类、归纳、总结等对数据进行的描述信息又形成了新的数据,不同程度的描述信息形成了数据的层次。 图1 数据血缘关系示例 父主题: 数据目录

    来自:帮助中心

    查看更多 →

  • 分析数据

    CARBON类型。 如果原始数据表存储格式不满足要求,您可以通过 CDM 将原始数据直接导入到DLI中进行分析,无需上传OBS。 通过DLI分析数据 进入数据湖探索DLI控制台,参考DLI用户指南中的创建数据库创建数据库。 参考创建OBS表创建OBS外表,包括贸易统计数据库、贸易详单信息表和基础信息表。

    来自:帮助中心

    查看更多 →

  • 分析数据

    CARBON类型。 如果原始数据表存储格式不满足要求,您可以通过CDM将原始数据直接导入到DLI中进行分析,无需上传OBS。 通过DLI分析数据 进入数据湖探索DLI控制台,参考DLI用户指南中的创建数据库创建数据库。 参考创建OBS表创建OBS外表,包括贸易统计数据库、贸易详单信息表和基础信息表。

    来自:帮助中心

    查看更多 →

  • 如何实现跨数据源查询

    如何实现数据源查询 跨数据源查询步骤如下: 假设数据存放在华为云上多个不同的地方,例如存放在OBS上。 在DLI中创建数据表,数据表对应的位置配置为数据所在的位置,例如OBS的某个桶路径(该数据实际还是在OBS中,不用迁移)。 在DLI中编写SQL直接查询分析这些数据。 父主题:

    来自:帮助中心

    查看更多 →

  • 分析图数据

    分析数据 通过GES直接对图数据进行可视化分析。 前提条件 已完成开发并调度Import GES作业,且作业运行成功。 通过GES分析数据 进入图引擎服务GES控制台,在“图管理”页面中单击对应图后的“访问”按钮。 图1 访问图 参考访问图和分析图,对导入的图数据进行可视化分析

    来自:帮助中心

    查看更多 →

  • 分析Hive数据

    分析Hive数据 功能介绍 本小节介绍了如何使用样例程序完成分析任务。样例程序主要有以下方式。 使用JDBC接口提交数据分析任务。 使用HCatalog接口提交数据分析任务。 样例代码 使用Hive JDBC接口提交数据分析任务,参考样例程序中的JDBCExample.java。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了