元数据中心

更新时间: 2024-11-29 15:02:22

元数据中心负责从各业务系统中抽取、加工、集中存储和管理元数据,以支持数据治理,并加强组织内部数据的组织、检索和分析能力。

前提条件

已经在元仓租户中完成元数据中心初始化配置,详情请参见元数据中心设置

默认支持关系型数据库的元数据采集,如需采集其他数据源类型,请增购对应功能。

权限说明

仅超级管理员、系统管理员和具有元数据功能查看权限的全局自定义角色支持查看元数据相关的菜单。

元数据介绍

元数据是描述数据特征的信息,它提供了关于数据的内容、来源、格式和结构等详细描述,有时被称为“数据的数据”。元数据的作用在于使数据更易于理解、管理和使用,它帮助用户识别和定位特定数据集,支持数据的组织和检索,同时,元数据还促进了数据的一致性和可交换性,为数据治理合规性和数据质量管理提供了基础。通过元数据,组织可以有效地监控和分析其数据资产,以实现更好的决策支持和业务洞察。

元数据分类

元数据根据用途分为技术元数据(Technical Metadata)、业务元数据(Business Metadata)和管理元数据(Management Metadata)。

  • 技术元数据是存储关于数据仓库系统技术细节的数据,并用于开发和管理数据仓库。在Dataphin中,技术元数据即为技术资产,显示数据板块、主题域、项目、存储类型、存储格式、生命周期等信息。

  • 业务元数据从业务角度描述了数据仓库中的数据,它提供了介于使用者和实际系统之间的语义层,使得不懂计算机技术的业务人员也能够读懂数据仓库中的数据。

  • 管理元数据是对所涉及的技术元数据、业务元数据采用科学有效的机制进行梳理、集成及管理,并对相关业务、开发等用户提供元数据服务,以满足不同用户的业务需求场景,为企业的业务系统和数据分析的开发、维护等过程提供支持。

元数据入口

  1. 在Dataphin首页的顶部菜单栏,选择治理 > 元数据

  2. 在元数据页面,左侧导航栏为您展示各个功能的入口。

    一级菜单

    二级菜单

    说明

    元数据采集

    采集概览

    元数据支持丰富的采集源类型,如传统数据库MySQL、Oracle,大数据存储Hive、Hologres等,可一览不同数据源类型已创建的采集任务、已创建的数据源、采集对象类型和支持的版本。

    采集任务

    通过采集适配器连接到指定的数据源,将源数据库中的对象元数据信息采集至Dataphin,通过内置解析器进行解析后存储并进行统一呈现。

    采集实例

    是采集任务根据定时调度时间或手动运行任务生成的实例任务。

    元数据管理

    业务系统元数据

    以列表形式为您展示采集到的元数据信息,您可以从不同视角出发查询数据。

    通用配置

    业务系统

    配置从指定来源采集的元数据归属的业务系统,后续可用于资产清单及目录的对象筛选、业务系统血缘关系展示等场景。

    数据探查

    配置可开启自动探查的数据表范围,管控数据探查记录保留时长、全局最多同时运行的探查任务数量、探查任务执行超时时间及set参数,从而更合理地运用资源。

上一篇: 回收站列表 下一篇: 元数据采集
阿里云首页 智能数据建设与治理 Dataphin 相关技术圈