文档

查看并管理治理工作台

更新时间:

您可以在治理工作台查看数据质量在校验过程中的出错情况及针对该质量校验问题发起整改、忽略、通知等治理操作,从而实现资产质量从制定计划到实现整改的PDCA完整流程,有效提升数据质量。本文为您介绍如何查看并管理治理工作台。

权限说明

  • 超级管理员和质量管理员可以查看及管理所有治理工作台中的问题,包括发起整改、加入白名单、忽略、通知等操作。

  • 质量负责人仅能查看和治理自己负责的治理工作台中的问题,包括发起整改、加入白名单、忽略、通知等操作。

从不同视角查看治理工作台

Dataphin支持从全局项目个人三个视角查看治理工作台。

image.png

  • 全局:超级管理员、质量管理员可从全局查看所有治理工作台的问题。

  • 项目:超级管理员、质量管理员支持切换所有项目查看治理工作台的问题,项目成员仅可选择已加入的项目并查看该项目下的治理工作台的问题。

  • 个人:超级管理员、质量管理员支持切换至任一成员查看治理工作台的问题,普通成员仅可查看质量负责人是自己的治理工作台的问题并且不支持切换。

说明

当从个人视角查看治理工作台时,仅展示您作为质量负责人的治理项。

治理工作台入口

  1. 在Dataphin首页,单击顶部菜单栏中的资产

  2. 按照下图指引,进入治理工作台页面。

    image.png

查看治理工作台列表

治理工作台页面为您展示数据质量在校验过程中所产生的问题,并针对发生的问题进行发起整改、加入白名单、忽略、通知等操作。Dataphin表、全域表、数据源、指标、实时元表页面展示一致,下图以Dataphin表为例。

image.png

参数

描述

搜索及筛选区

您可以选择Dataphin表全域表数据源指标实时元表不同的治理对象查看治理详情。

您也可以根据校验对象的名称或质量规则的名称进行模糊搜索,或者根据治理项待处理的规则强度治理状态进行精确筛选。

列表区

为您展示表名称校验对象规则名称治理状态整改流程规则强度质量负责人校验范围校验时间信息,同时,您可以在操作列下根据不同的治理状态执行不同的操作,详情请参见操作说明

说明

数据源实时元表不支持展示校验分区信息;指标不支持展示校验对象信息。

批量操作区

可对治理对象批量执行忽略此次异常取消忽略加入白名单发起整改重新校验关联知识库文档操作。

  • 忽略此次异常:可把待处理的问题置为已忽略后,将无需处理。建议针对不重要的问题进行忽略。

    使用场景:数据源连通性中间断过,但目前已经稳定,无需进行修复;或者历史任务中出现过异常,但最新数据处理中已经用不到了,可以选择直接忽略。

    image

  • 取消忽略:取消忽略后,将会按照最新一次校验结果确定问题状态。如果校验通过,问题状态是已解决;如果校验不通过,问题状态是未解决。

    image

  • 加入白名单:加入白名单后,治理工作台会自动忽略当前校验产生的错误情况,相应的质量规则任会正常执行和校验,生产质量报告、发送告警、阻断下游任务;白名单生效期内,发生的质量问题不会上报;白名单失效或者删除之后,历史的问题不会补报,但是后面新出现的问题会上报。

    使用场景:当前表正处在测试阶段,每天数据不稳定,可以等稳定了之后在监控。

    批量加入白名单和单个操作一致,如何加入白名单,请参见加入白名单。如何管理白名单,请参见查看并管理治理白名单

  • 发起整改:可对当前规则和监控对象发起整改,发起整改后,可对该校验详情的整个整改流程进行查询追踪。批量发起整改流程和单个操作一致,如何发起整改流程,请参见发起整改。如何管理整改流程,请参见查看并管理整改流程

  • 重新校验:仅重新校验当前选中的异常,发起重新校验后,如果数据质量问题已经处理,可以重新执行校验规则,会按照执行后的校验状态修改治理项状态:校验不通过-未处理,校验通过-已处理。

    image

  • 关联知识库文档:规则关联知识后,可在质量规则和治理工作台中查看关联知识。支持为治理项对象批量配置知识库。如需创建,请参见新建及管理知识库

    image.png

操作说明

治理状态

操作项

待处理

支持查看详情发起整改忽略此次异常加入白名单通知责任人重新校验关联知识库文档

校验中

支持查看详情发起整改加入白名单通知责任人关联知识库文档

已处理

支持查看详情关联知识库文档

已忽略

支持查看详情取消忽略重新校验关联知识库文档

操作项

描述

查看详情

支持查看治理对象的规则校验详情、操作记录、相关知识库信息。

  • 校验详情:支持查看当前治理项最近一次的校验详情,包括基本信息、校验配置、校验结果信息。

  • 操作记录:为您展示当前治理项的历史操作记录,包括表名称、校验对象、规则、校验范围、操作记录信息,同时,您可根据校验范围筛选操作记录。

  • 相关知识库:支持查看规则关联的知识库信息。包括表名称、校验对象、规则、相关知识库文档信息,同时,您可对知识库执行搜索、查看、编辑、删除操作。操作详情请参见查看知识库

image.png

发起整改

可对当前规则和监控对象发起整改,发起整改后,可对该校验详情的整个整改流程进行查询追踪。如何发起整改流程,请参见发起整改。如何管理整改流程,请参见查看并管理整改流程

忽略此次异常

可把待处理的问题置为已忽略后,将无需处理。建议针对不重要的问题进行忽略。

使用场景:数据源连通性中间断过,但目前已经稳定,无需进行修复;或者历史任务中出现过异常,但最新数据处理中已经用不到了,可以选择直接忽略。

image

取消忽略

取消忽略后,将会按照最新一次校验结果确定问题状态。如果校验通过,问题状态是已解决;如果校验不通过,问题状态是未解决。

image

加入白名单

加入白名单后,治理工作台会自动忽略当前校验产生的错误情况,相应的质量规则任会正常执行和校验,生产质量报告、发送告警、阻断下游任务;白名单生效期内,发生的质量问题不会上报;白名单失效或者删除之后,历史的问题不会补报,但是后面新出现的问题会上报。

使用场景:当前表正处在测试阶段,每天数据不稳定,可以等稳定了之后再进行监控。

如何加入白名单,请参见加入白名单。如何管理白名单,请参见查看并管理治理白名单

通知责任人

您可通过站内信电话短信邮件钉钉方式通知质量负责人。

image

重新校验

仅重新校验当前选中的异常,发起重新校验后,如果数据质量问题已经处理,可以重新执行校验规则,会按照执行后的校验状态修改治理项状态:校验不通过-未处理,校验通过-已处理。

image

关联知识库文档

规则关联知识后,可在质量规则和治理工作台中查看关联知识。支持选择未被当前整改流程关联的知识库。如需创建,请参见新建及管理知识库

image.png

加入白名单

image

参数

描述

白名单范围

可选择当前规则监控对象

  • 当前规则:在有效期内,针对当前监控对象+质量规则的组合出现新的质量校验失败会自动变成已忽略状态。

  • 监控对象:在有效期内,针对所选监控对象新出现的质量校验失败会自动变成已忽略状态。

有效期

可选择7天30天90天180天永久自定义

说明
  • 申请当天不计算在内。

  • 若选择永久,建议调整质量监控配置。

操作说明

必填项,请填写加入白名单的原因。

发起整改

image

参数

描述

整改范围

支持当前规则监控对象

  • 当前规则:只会针对当前选择的规则进行整改。

  • 监控对象:对所选规则对应的监控对象下的所有异常发起整改。

  • 如果当前所选问题已经在整改流程中,那么仍会保持在原有的整改流程中,不会重复发起整改。

整改流程名称

自定义整改流程名称,不超过128字符。

整改人

整改人是整改流程的整改过程的负责人,需有质量规则的编辑及校验权限。

验收人

验收人是整改流程的整改结果的最终负责人。

优先级

分为三个层级。

操作说明

请填写发起整改的原因,不超过128字符。

  • 本页导读 (0)
文档反馈