元数据采集概览

前提条件

需先在管理中心 > 数据源管理 > 应用系统创建应用系统，才能使用应用系统类型的采集源。

使用限制

默认支持关系型数据库的元数据采集，如需采集其他数据源类型，请增购对应功能。

元数据采集工作流说明

若采集的数据源网络环境与Dataphin集群所在网络环境不通，需要依赖注册调度集群功能，并将采集数据写入到Dataphin部署依赖的对象存储系统（如OSS）作中转，再将数据写入Dataphin系统，此时会产生额外的存储费用。

操作步骤

1. 在Dataphin首页的顶部菜单栏，选择治理 > 元数据。

2. 在左侧导航栏选择元数据采集 > 采集概览。

3. 在欢迎使用元数据采集与管理页面，Dataphin以卡片的形式为您展示不同数据源或应用系统配置的采集任务数、支持的采集对象类型等信息。

   • 数据源：支持关系型数据库和大数据存储数据库，详情请参见Dataphin支持的数据源。

     其中，MySQL、Oracle支持的版本如下：

     • MySQL：MySQL5.1.43、MySQL5.6/5.7、MySQL8、RDS MySQL。

     • Oracle：Oracle11g、Oracle12c、Oracle18c、Oracle19c、Oracle21c、Oracle23c。

   • 应用系统：支持Quick BI。

4. 您可以对目标数据源或应用系统快捷创建采集任务。

   新建采集任务：鼠标悬停至卡片可快捷新建采集任务，详情请参见创建及管理元数据采集任务。

   说明

   一个数据源仅支持配置一个采集任务，同一个数据源的2个不同环境源（开发环境和生产环境）可分别配置采集任务。