更新时间:2024-12-23 GMT+08:00
分享

创建质量检查任务

操作场景

通过创建质量检查任务,基于模型设计时设置的约束规则,将入图数据进行数据质量清洗后,识别出不符合数据定义标准的数据,同时生成异常数据质量报告供业务人员分析。本文指导您如何新增质量检查任务。

前提条件

  • 已获取开发人员及以上权限用户的账号和密码。
  • 创建质量检查任务前请确保被检查实体已有单数据实体属性约束规则,详细请参见配置单数据实体属性约束规则

操作步骤

  1. 登录LinkX-F系统首页。
  2. 选择数据质量 > 质量检查任务,进入质量检查任务页面。
  3. 单击“创建”,弹出“创建质量检查任务”页面。
  4. 填写相关参数信息,如表1所示:

    表1 参数信息说明

    字段

    说明

    基本信息

    名称

    必填,只能包含中文、英文、下划线,不能含有半角字符,长度不能超过 128 个字符。

    责任人

    必填,选择责任人。

    描述

    非必填,手工输入,长度不超过 1024 个字符。

    数据实体规则配置

    数据实体

    必填,下拉选择数据实体。

    添加规则

    非必填。单击“添加规则”按钮后,弹出“选择已有规则”窗口。

    说明:

    已有规则来源于已选数据实体已有的单数据实体属性约束规则,详细可参见配置单数据实体属性约束规则

    其中“被检查数据位置”的值不同,属性获取来源有所不同,具体如下:

    • 索引数据:根据数据实体默认的图数据库映射获取入图属性。
    • 全量数据:根据数据实体整合层数据库首选映射获取已配置映射属性。

    排程选项

    排程选项

    必选,可选“按计划执行”“立即执行”。默认选中“立即执行”

    • 按计划执行:需填写“执行时间”“作业频率”
      说明:
      • 首次执行是全量执行,本排程中后续按增量执行。每次执行到排程计划中任务的开始时间为当次数据的结束时间;下次执行,从上次的数据结束时间执行到本次任务启动时间。
      • 如果首次执行时任务终止,则重新启动时全量执行;如果增量执行时任务终止,则重新启动时从上次成功执行的完成时间开始执行质量检查。
    • 立即执行:立即执行时清洗的数据是整合层/图数据中所有数据,即是全量执行,如果清洗过程中出现异常或手动终止,重启后,再次全量执行。

  5. 填写完成后单击“保存”

相关文档