中软国际数据治理专业服务解决方案实践

数据质量 质量作业和对账作业有什么区别？ 如何确认质量作业或对账作业已经阻塞？ 如何手工重启阻塞的质量作业或对账作业？ 怎样查看质量规则模板关联的作业？ 用户在执行质量作业时提示无 MRS 权限怎么办？

查看更多 →

数据质量 数据质量检测算子，是用户在进行离线计算之前使用原始初始格式数据（离线数据源中的离线数据）或者通用格式数据检测输入数据是否合法。包括离线数据中是否包含特殊字符，数据类型是否正确，是否缺少必备信息等。 前提条件 已将离线数据上传至OBS桶中。 创建数据质量作业 创建数据质量操作步骤如下：

查看更多 →

先是基于质量作业的监控发现并跟踪数据质量问题，其次是对数据质量问题的异常情况与产生原因进行分析，待分析出结果后再制定相应的解决方案解决数据质量问题，从而达到数据质量逐步提升的最终效果。 数据质量问题分析：针对数据质量作业中发现的数据问题，通过数据质量规则，结合对异常数据的探查统计

查看更多 →

数据质量 质量检查任务 质量检查报告

查看更多 →

数据质量 业务指标监控（待下线） 数据质量监控 使用教程

查看更多 →

数据质量API 目录接口 规则模板接口 质量作业接口 对账作业接口 运维管理接口 质量报告接口 导入导出接口

查看更多 →

数据质量配置数据搬迁 数据质量数据搬迁依赖于数据质量监控的规则模板、质量作业、对账作业导入导出功能。 约束与限制 已完成管理中心数据搬迁。 业务指标监控中的指标、规则、业务场景等数据均不支持导入导出，如有涉及，请您进行手动配置同步。 系统支持将自定义的规则模板批量导出，一次最多可导出200个规则模板。

查看更多 →

图16 质量监控报告2 图17 质量监控报告3 对相应的数据质量问题以工单形式进行流转和处理。 图18 质量监控报告4 数据质量概览大屏 数据质量概览大屏支持及时获悉不同统计周期内的错误告警数据量及环比、告警数量变换趋势及数据质量评分变化趋势、质量综合评分及不同质量指标的综合评

查看更多 →

数据质量管理 数据结构 数据导入 数据探索 父主题： 数据源管理

查看更多 →

数据质量报表 数据质量报表是为了记录数据入图任务中，对应实体每日的定时调度异常数据。异常数据的产生场景有以下两种： 场景一：数据入图范围表中的结束时间超过1天无更新，并且数据入图任务（满足调度周期间隔时间小于或等于1天）中7天内有调度记录的数据，排除对账中实体备注中含有IGNORE字段的数据，取最近的调度任务信息。

查看更多 →

数据质量监控 数据质量监控简介 新建数据质量规则 新建数据质量作业 新建数据对账作业 查看作业实例 查看数据质量报告 父主题： 数据质量

查看更多 →

失败。 数据质量当前不支持MRS Hive组件的严格模式。 数据库 选择配置的数据质量规则所应用到的数据库。 说明： 数据库基于已建立的数据连接。 当“规则类型”选择“库级规则”，数据对象选择对应的数据库即可。 数据表 选择配置的数据质量规则所应用到的表。 说明： 数据表与数据库强相关，基于已选择的数据库。

查看更多 →

提交数据质量作业 提交数据质量作业API 查询全局特征配置 父主题： 作业相关API

查看更多 →

给用户提供一个反馈数据问题的渠道，加强用户体验感、参与感；同时给数据质量核验增加用户渠道，共同打造一个准确，高质量的一个数据查询平台。 图2 数据质量 父主题： 数据地图平台操作手册

查看更多 →

查看数据质量报告 您可以查询业务指标、数据质量中数据对象的质量评分，来判断各个对象是否质量达标。 质量报告的数据保留最近90天的结果。 查看质量报告包含技术报告和业务报告。 技术报告的统计范围是依据质量作业的运行结果，包含数据连接、数据库、表名、评分等信息。 业务报告的统计范围是

查看更多 →

300 40 质量作业接口 表4 质量作业接口 API 说明 API流量限制（次/10s） 用户流量限制（次/10s） 获取质量作业列表V1 批量查询数据质量作业，返回质量作业列表。 300 40 获取质量作业列表 获取质量作业列表。 300 40 获取质量作业详情 获取质量作业详情 300

查看更多 →

提供“自动学习白盒化”能力，开放模型参数、自动生成模型，实现模板化开发，提高开发效率 采用自动深度学习技术，通过迁移学习（只通过少量数据生成高质量的模型），多维度下的模型架构自动设计（神经网络搜索和自适应模型调优），和更快、更准的训练参数自动调优自动训练 采用自动机器学习技术，基于

查看更多 →

检测数据集质量 数据集创建成功后，平台将对数据集中的数据进行质量校验，并给出健康度评分、合规度评分与数据长度分布。 检测数据集质量 在“数据工程 > 数据管理”页面，选择“我的数据集”或者“训练数据集”页签。 单击数据集名称，进入数据集详情页，查看详细的数据质量。 其中，数据长度

查看更多 →

据质量会对数据进行校验，并阻塞生产链路，以避免问题数据污染扩散。同时，数据质量提供了历史校验结果的管理，以便您对数据质量分析和定级。 另外，数据质量监控DQC支持根据数据架构中的数据标准，自动生成标准化的质量规则，并进行周期性的监控。 数据质量监控主界面包括以下功能模块。 功能 说明

查看更多 →

提交数据质量作业API 功能介绍 该接口用于提交数据质量作业并进行离线计算。 URI POST /v1/{project_id}/data-quality 参数说明请参见表1。 表1 URI参数说明 名称 是否必选 类型 说明 project_id 是 String 项目编号，用

查看更多 →

查询实时质量数据 功能介绍 获取实时质量数据的相关指标在某一时间段内每分钟的统计数据。 最大查询跨度1天。 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI GET /

查看更多 →