X-数据质量

X-数据质量针对数据质量规则校验异常结果和在使用资产过程中反馈的问题,基于大模型进行问题分析,形成关键证据链,并给出整改意见。本文为您介绍如何使用X-数据质量。

前提条件

需购买数据质量功能和X-数据质量功能才能使用X-数据质量。

权限说明

超级管理员、质量管理员和具有问题清单-查看权限的自定义全局角色支持使用X-数据质量。

智能分析质量问题流程

  1. 质量问题:圈选需要智能根因分析的质量问题。

  2. 问题分析:通过大模型针对圈选的质量问题进行问题分析,识别问题数据表的异常数据用于后续分析。

  3. 整改意见:根据关键证据链进行综合判断,智能推荐整改意见,提升数据质量。

操作步骤

  1. Dataphin首页的顶部菜单栏,选择超级X > X-数据质量,进入X-数据质量页面。

  2. 您可以在X-数据质量页面为质量问题进行智能根因分析,从而寻找解决方案,提升数据可靠性与分析效率。

    image

    区域

    描述

    智能助手

    支持切换有使用权限且已启用的智能应用。

    任务记录/新建任务

    • 任务记录:单击左上角的任务记录,在任务记录对话框中,可查看最近7天或最近30天共20条任务记录,并可以执行如下操作:

      • 搜索:您可以根据任务关键字搜索任务记录。

      • 重命名:单击任务记录名称后的重命名图标,支持重命名任务记录的名称,不超过256个字符。

      • 删除:可单击任务记录名称后的删除图标,删除单条任务记录。

    • 新建任务:单击左上角的新建任务,重新开启新的任务页面。

    智能根因分析

    • 质量问题:选择需要智能根因分析的质量问题。您可以在请选择质量问题列表选中某个问题或在输入框中自定义输入问题,不超过2000个字符。

    • 分析异常数据:执行任务时根据已选质量问题结合大模型查询问题数据表的异常数据用于数据分析,仅查询当前账号具有select权限的数据表。

    • 模型切换:支持切换当前智能助手已配置的模型进行智能问答。

    • 质量问题列表:为您展示Dataphin表待处理状态的质量问题,您可以单击底部查看所有质量问题,跳转至治理 > 数据质量 > 问题清单页面查看全部质量问题。

      • 搜索与筛选:您可以根据问题对象的名称或描述进行搜索,或快捷筛选严重我负责的质量问题。

      • 操作:支持对目标质量问题执行查看发现时间、查看详情、智能根因分析操作。

        • 查看发现时间:鼠标悬停时钟图标,您可以查看当前质量问题的发现时间点(系统问题为校验时间,手动问题为问题提出时间)及问题的持续时长。

        • 查看详情:单击查看图标,查看问题对象的规则校验详情、操作记录及相关知识库(仅系统问题支持查看)信息。

        • 智能根因分析:单击智能根因分析图标,系统结合大模型为您分析质量问题并给出整改意见,详情请参见查看智能根因分析

    • 开始执行:质量问题配置完成后,单击image图标,触发任务。

      任务执行流程请参见智能分析质量问题流程,任务执行成功后,可查看智能根因分析。

查看智能根因分析

问题分析页面为您展示已配置的质量问题,通过大模型能力,进行问题分析,形成完整的证据链路以及给出改进意见。

  1. 您可以查看当前质量问题的基础信息及根因推断。

    • 基础信息:包括当前质量问题的对象名称、整改状态、问题来源、发现时间及问题概述。

    • 根因推断:包括当前质量问题的原因类别、具体原因、可能性分析及根因概述。

  2. 您可以在问题分析页面执行如下操作。

    • 查看发起整改:若当前质量问题发起了整改,单击查看详情,跳转至治理 > 数据质量 > 整改流程页面对当前问题的整改全流程进行跟踪。

    • 查看问题分析:单击查看血缘前的下拉箭头图标,可在画布中查看完整的质量问题分析链路图。

    • 查看血缘:当前账号具有资产清单-查看权限,可单击跳转至治理 > 资产清单详情页面查看当前资产对象的血缘信息。

    • 查看详细说明:单击操作列下的查看图标,在详细说明面板中,您可以查看当前质量问题的根因概述、关键证据链、影响评估及改进建议。您可以单击底部的下载,将分析详情下载至本地。