数据质量治理

用户通过设置的数据质量规则执行面向不同计算资源的质量检查任务(包括质量检查计划和场景画布规则),在物理表监控明细以及数据质量监控报告页面查看系统整体数据质量概览及多维度细分数据的质量情况。

前提条件

  • 已根据快速入门教程完成加载样例数据操作,具体信息请参见样例数据

  • 已根据快速入门教程完成数据标准建模中的物理化逻辑表操作,具体信息请参见数据标准建模

启动质量检查计划

  1. 登录企业数据智能平台

  2. 在页面左上角,选择数据中台左上角图标 > 协同

  3. 在顶部菜单栏,单击选择工作组图标,选择快速入门工作组。

  4. 在顶部菜单栏,单击质量评估
  5. 在左侧导航栏,单击质量检查计划
  6. 质量检测计划页面,单击目标计划ods_qcheck操作列的启用,在提醒对话框中,单击启用计划,启用质量检查计划。
    启用以后,可以根据设置的调度周期,查看已创建的质量检查计划任务的执行详情。

    如果设置的周期调度还未开始,可以单击试跑手动执行。

    说明 试跑为一次性任务,对应任务类型中的手动执行。
  7. 重复步骤6,启动质量评估计划dws_qcheck

订阅物理表质量预警

  1. 质量检测计划页面,单击右上角的预警订阅
  2. 预警订阅页面,按照需要选择下述任一种方式进行订阅。
    • 单个订阅
      1. 可选:选择云计算资源类型、物理表名称或者订阅状态,单击查询,筛选到需要的逻辑表。
      2. 找到目标模型ods_base_yhkh_demo_di,打开是否订阅列的开关。
        说明 订阅开关开启后,系统会把当前物理表最新的质量检测结果自动推送至任务运维 > 全景监控模块,在监控任务管理页面生成一条对应的质量监控任务。
    • 批量订阅
      1. 单击模板下载,将模板下载至本地,并填写物理表名和云计算资源code。
      2. 单击Excel导入配置单,导入后自动打开已导入的模型的订阅开关。
  3. 在预警订阅页面,单击前往配置报警信息,在监控任务管理页面,对该监控任务进行配置,具体操作,请参见运维监控
    配置完成后,系统将会推送当前模型执行质量规则后的质量结果信息。

查看物理表监控明细

  1. 在左侧导航栏,单击物理表监控明细
  2. 单击目标物理表ods_base_yhkh_demo_didws_ren_kh_demo_di操作列的全部评估明细,查看当前物理表全部质量任务运行结果。
    • 查看详情:单击查看详情,跳转到物理表质量报告明细页面,可查看质量报告详情。
    • 查看日志:单击查看日志,可查看运行日志。

查看质量评估报告

质量评估报告主要从评分维度、参与评估物理表数进行质量评分明细的展示,且支持查看评估分析详情。

说明 当天执行成功的质量检查任务次日才能生成对应的质量评估报告,请次日再查看质量评估报告。
  1. 在左侧导航栏,单击质量评估报告
  2. 质量评估报告页面,单击综合质量得分图表右侧的质量评分说明,查看质量评价维度等信息。
  3. 质量评估报告页面,质量评分明细列表中,选择目标评价维度为规范性,单击操作列中的评估分析,查看某个指标的评估分析。