中软国际数据治理专业服务解决方案实践

先是基于质量作业的监控发现并跟踪数据质量问题，其次是对数据质量问题的异常情况与产生原因进行分析，待分析出结果后再制定相应的解决方案解决数据质量问题，从而达到数据质量逐步提升的最终效果。 数据质量问题分析：针对数据质量作业中发现的数据问题，通过数据质量规则，结合对异常数据的探查统计

查看更多 →

数据质量 质量检查任务 质量检查报告

查看更多 →

数据质量 质量作业和对账作业有什么区别？ 如何确认质量作业或对账作业已经阻塞？ 如何手工重启阻塞的质量作业或对账作业？ 怎样查看质量规则模板关联的作业？ 用户在执行质量作业时提示无 MRS 权限怎么办？

查看更多 →

数据质量 数据质量检测算子，是用户在进行离线计算之前使用原始初始格式数据（离线数据源中的离线数据）或者通用格式数据检测输入数据是否合法。包括离线数据中是否包含特殊字符，数据类型是否正确，是否缺少必备信息等。 前提条件 已将离线数据上传至OBS桶中。 创建数据质量作业 创建数据质量操作步骤如下：

查看更多 →

数据质量组件 业务指标监控（待下线） 数据质量监控 使用教程

查看更多 →

数据质量API 目录接口 规则模板接口 质量作业接口 对账作业接口 运维管理接口 质量报告接口 导入导出接口

查看更多 →

数据质量数据搬迁 数据质量数据搬迁依赖于数据质量监控的规则模板、质量作业、对账作业导入导出功能。 约束与限制 已完成管理中心数据搬迁。 业务指标监控中的指标、规则、业务场景等数据均不支持导入导出，如有涉及，请您进行手动配置同步。 系统支持将自定义的规则模板批量导出，一次最多可导出200个规则模板。

查看更多 →

数据质量管理 数据结构 数据导入 数据探索 父主题： 数据源管理

查看更多 →

图16 质量监控报告2 图17 质量监控报告3 对相应的数据质量问题以工单形式进行流转和处理。 图18 质量监控报告4 数据质量概览大屏 数据质量概览大屏支持及时获悉不同统计周期内的错误告警数据量及环比、告警数量变换趋势及数据质量评分变化趋势、质量综合评分及不同质量指标的综合评

查看更多 →

数据质量报表 数据质量报表是为了记录数据入图任务中，对应实体每日的定时调度异常数据。异常数据的产生场景有以下两种： 场景一：数据入图范围表中的结束时间超过1天无更新，并且数据入图任务（满足调度周期间隔时间小于或等于1天）中7天内有调度记录的数据，排除对账中实体备注中含有IGNORE字段的数据，取最近的调度任务信息。

查看更多 →

数据质量监控 数据质量监控概述 新建规则模板 新建质量作业 新建对账作业 查看作业实例 查看质量报告 父主题： 数据质量组件

查看更多 →

提交数据质量作业 提交数据质量作业API 查询全局特征配置 父主题： 作业相关API

查看更多 →

给用户提供一个反馈数据问题的渠道，加强用户体验感、参与感；同时给数据质量核验增加用户渠道，共同打造一个准确，高质量的一个数据查询平台。 图2 数据质量 父主题： 数据地图平台操作手册

查看更多 →

提交数据质量作业API 功能介绍 该接口用于提交数据质量作业并进行离线计算。 URI POST /v1/{project_id}/data-quality 参数说明请参见表1。 表1 URI参数说明 名称 是否必选 类型 说明 project_id 是 String 项目编号，用

查看更多 →

查询实时质量数据 功能介绍 获取实时质量数据的相关指标在某一时间段内每分钟的统计数据。 最大查询跨度1天。 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI GET /

查看更多 →

数据质量监控概述 数据质量监控DQC（Data Quality Control）模块是对数据库里的数据质量进行质量管理的工具。您可从完整性、有效性、及时性、一致性、准确性、唯一性六个维度进行单列、跨列、跨行和跨表的分析。数据质量支持对离线数据的监控，当离线数据发生变化时，数据质量

查看更多 →

数据实施质量检查 实施质量检查包含数据实例实施过程中的工具，旨在帮助客户在进行数据治理过程中，能够更好地监控实施过程中的质量，包含数据模型设计、源系统和SDI层数据一致性检测、数据平台检测、脚本规范检测、 DataArts Studio 命名规范检测和作业监控。 表1 实施质量检查功能介绍

查看更多 →

获取质量报告业务报告数据 功能介绍 获取质量报告业务报告数据 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/quality/report/business/scores 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是

查看更多 →

data_connection_name String 数据连接名称 database_name String 数据库名称 table_name String 数据表名名称 data_connection_score Double 数据连接评分 database_score Double 数据库评分 table_score

查看更多 →

Studio作业开发控制台，选择步骤6：数据开发中新建的作业，单击数据质量监控节点，然后在该节点的节点属性中，单击“数据质量规则名称”后的按钮，可以跳转到DataArts Studio数据质量控制台的“质量作业”页面。 图1 质量作业节点 在数据质量页面，单击质量作业名称，可以查看质量作业的基础配置。 图2

查看更多 →

runConsistencyTask 创建质量作业 Rule createRuleTask 删除质量作业 Rule deleteRule 更新质量作业 Rule updateRule 运行质量作业 Rule instanceScheduleOperation 批量运行质量作业 Rule batch

查看更多 →