智能推荐标准映射

标准映射基于圈选的数据表通过大模型结合语义分析,识别核心字段,从而智能推荐标准映射,您可对映射关系执行应用、弃用等操作。本文为您介绍如何配置智能推荐标准映射。

前提条件

已配置并开启X-数据标准,详情请参见智能助手

权限说明

  • 超级管理员、数据标准管理员和具有数据标准-管理权限的自定义全局角色支持使用X-数据标准。

  • 超级管理员、运营管理员支持添加Dataphin表和数据源表资产;另外,项目/板块的管理员、表负责人支持添加Dataphin表资产;运营人员、表维护人员支持添加数据源表资产。

  • 超级管理员、数据标准管理员、标准负责人、资产负责人支持新增或删除映射关系。

操作步骤

  1. Dataphin首页的顶部菜单栏,选择超级X > X-数据标准,进入X-数据标准页面。

  2. 您可以在X-数据标准页面实现资产对象和标准之间的映射关联。

    image

    区域

    描述

    智能助手

    支持切换有使用权限且已启用的智能应用。

    任务记录/新建任务

    • 任务记录:单击左上角的任务记录,在任务记录对话框中,可查看最近7天或最近30天共20条任务记录,并可以执行如下操作:

      • 搜索与筛选:您可以根据任务关键字搜索任务记录,也可单击筛选图标,根据治理操作、数据来源进行筛选。

      • 重命名:单击任务记录名称后的重命名图标,支持重命名任务记录的名称,不超过256个字符。

      • 删除:可单击任务记录名称后的删除图标,删除单条任务记录。

    • 新建任务:单击左上角的新建任务,重新开启新的任务页面。

    智能推荐标准映射数据范围

    根据资产来源圈选需要推荐标准映射的数据范围。

    • 添加数据:仅Dataphin表支持推荐标准映射,其中,项目下仅包含物理表,板块下仅包含逻辑表。单击请选择治理数据添加数据来源按钮,在添加数据来源面板中,选择资产对象后单击确定。支持最多选中5个数据来源。

      • 资产搜索与筛选:支持根据资产关键字进行搜索,也可根据环境、资产的类型进行筛选。

      • 资产规则配置:选中资产后,单击数据范围下的编辑图标,在数据范围配置对话框中,配置资产的数据范围,单击确定

        数据范围:支持全部表指定表,选中指定表后,支持根据表全名、资产清单标签、表描述、db/schema(仅数据源来源支持该属性)配置过滤条件,以便对资产进行更细粒度地筛选。支持最多配置10个过滤条件;过滤条件之间的关系为且、或。

        • 表全名/表描述/db/schema:支持的筛选条件为前缀匹配、后缀匹配、包含(表描述仅支持该条件)、属于(db/schema仅支持该条件)。

          • 前缀匹配后缀匹配包含:支持输入不超过256个字符。

          • 属于:支持选择当前资产来源下对应类型的资产对象,最多选择500个资产。

        • 资产清单标签:支持的筛选条件为包含任一、包含所有。

          • 包含任一:资产清单标签需包含所选的任意一个标签值即为满足条件。

          • 包含所有:资产清单标签需包含所选的所有标签值即为满足条件。

    • 智能识别核心字段:开启后,执行任务时根据已选数据范围基于语义分析智能识别核心字段后再执行标准映射;关闭后,针对已选资产对象的所有字段执行标准映射。

      重要

      智能识别核心字段可减少无效信息干扰。请注意,也有可能会忽略需治理的对象。

    • 过滤已映射字段:仅选中推荐标准映射卡片时支持配置。选中后,若字段已存在有效映射的标准,则会过滤该部分字段。

    • 开始执行:数据范围配置完成后,单击image图标,触发任务。

      任务执行流程请参见智能推荐标准映射流程,任务执行成功后,可查看标准映射详情。

查看标准映射详情

标准映射推荐列表为您展示已配置的资产通过大模型智能推荐生成的数据标准和资产对象之间的映射关系。您可以全部展开按标准汇总按表汇总3个视角查看标准效映射关系。

从全部展开视角查看标准映射

  • 您可以根据数据表、字段、标准的名称进行搜索,也可根据数据来源、标准集进行筛选,或快捷筛选待审核应用失败的标准映射对象。

  • 为您展示标准映射对象的所属表/数据来源、字段、数据标准/编码、所属标准集/目录、审核状态信息。

    • 所属表/数据来源:Dataphin物理表展示项目名,逻辑表展示板块名,数据源展示db/schema(所属数据源),单击名称跳转至治理 > 资产清单下当前资产的对象详情页面查看更多资产信息。

    • 数据标准/编码:单击标准名称可在查看标准面板中,查看当前对象所映射到的标准详情,支持切换版本查看。

从按标准汇总视角查看标准映射

  • 您可以根据标准的名称或编码进行搜索,也可根据标准集进行筛选,或快捷筛选待审核应用失败的标准映射。

  • 为您展示标准的名称、数据编码、所属标准集、标准集目录、字段数、审核状态信息。

    查看详情:单击标准的名称或操作列下的查看图标,查看标准映射详情。

标准映射详情

  • 您可以根据资产的表名或字段名进行搜索,也可根据数据来源进行筛选,或快捷筛选待审核、应用失败的资产。

  • 为您展示资产的名称、所属表、数据来源、审核状态信息。

    • 所属表:单击名称跳转至治理 > 资产清单下当前资产的对象详情页面查看更多资产信息。

    • 数据来源:Dataphin物理表展示项目名,逻辑表展示板块名,数据源展示db/schema(所属数据源)。

从按表汇总视角查看标准映射

  • 您可以根据表的名称进行搜索,也可根据数据来源进行筛选,或快捷筛选待审核应用失败的标准映射。

  • 为您展示标准映射的资产名称、数据来源、字段数、标准数、审核状态信息。

    • 查看详情:单击表的名称或操作列下的查看图标,查看标准映射详情。

    • 数据来源:Dataphin物理表展示项目名,逻辑表展示板块名,数据源展示db/schema(所属数据源)。

标准映射详情

  • 您可以根据资产的字段名或标准名进行搜索,也可根据标准集进行筛选,或快捷筛选待审核、应用失败的资产。

  • 为您展示资产的名称、数据标准/编码、所属标准集/目录、审核状态信息。

    数据标准/编码:单击标准名称可在查看标准面板中,查看当前对象所映射到的标准详情,支持切换版本查看。

管理标准映射详情

您可以针对不同视角下的资产或对象执行不用的操作,详见下方表格。

视角

单条操作

批量操作

标准映射详情操作

全部展开

可针对当前映射关系中的具体对象(Dataphin表或数据源)执行应用弃用操作。

您可对该视角下页面上所选中的具体对象(Dataphin表或数据源)执行应用弃用操作。

按标准汇总

可针对当前映射关系中的标准进行操作,该标准下所包含的所有生成映射关系的对象跟随标准的操作执行。您可对该标准执行查看详情应用弃用操作。

可针对当前映射关系中标准所包含的所有生成映射关系的对象执行操作。

  • 单个操作:支持应用弃用解除映射关系(并删除此行)

  • 批量操作:支持应用/全部应用弃用/全部弃用

按表汇总

可针对当前映射关系中的资产进行操作,该资产下所包含的所有生成映射关系的对象跟随资产的操作执行。您可对该资产执行查看详情应用弃用操作。

可针对当前映射关系中资产所包含的所有生成映射关系的对象执行操作。

  • 单个操作:支持应用弃用解除映射关系(并删除此行)

  • 批量操作:支持应用/全部应用弃用/全部弃用

操作

描述

应用

当审核状态为待审核、应用失败、已弃用时支持操作。即将当前映射关系添加至治理 > 数据标准 > 映射关系 > 有效映射列表,若为单条映射关系应用,单击操作列下应用图标即可,若为批量应用,可根据审核状态选择应用的范围和选择无效映射冲突处理。

  • 应用状态筛选:支持选择待审核应用失败2种审核状态的映射关系进行应用。

  • 无效映射冲突处理:针对待应用的映射关系若已在无效映射列表中的处理策略,支持跳过不添加或将无效映射置为有效映射。

    • 跳过不添加:若待应用的映射关系已在无效映射关系列表,则跳过记录不处理,该条映射关系的审核状态记录为应用失败。

    • 将无效映射置为有效映射:若待应用的映射关系已在无效映射关系列表,系统将本条映射关系先解除无效映射关系,再添加至有效映射列表。

弃用

当审核状态为待审核、应用失败时支持操作。若为单条映射关系弃用,单击操作列下弃用图标即可,若为批量弃用,可根据审核状态选择应用的范围,支持待审核应用失败2种审核状态的映射关系进行弃用。

解除映射关系(并删除此行)

当审核状态为已应用时支持操作。将当前映射关系进行解除并删除,您可以在数据标准页面通过批量导入有效映射关系或创建落标映射规则重新添加。