创建MaxCompute数据源并绑定至DataWoks数据开发后,您可以直接在数据地图进行MaxCompute表的相关操作。包括数据检索、数据预览、查看元数据详情、查看数据血缘关系、分类分组管理数据表、数据洞察等操作。本文为您介绍如何在数据地图查看和管理MaxCompute表。
前提条件
创建MaxCompute数据源并绑定至DataWoks数据开发,绑定后DataWorks会面向引擎自动采集元数据,系统将一次性全量采集存量的元数据,同时每天采集增量的元数据,并汇集至数据地图。由系统自动运维元数据采集器,您无需额外管理元数据采集器。
若在数据地图中,没有找到目标表,您可进入
,手动同步相关表。进入数据地图
登录DataWorks控制台,切换至目标地域后,单击左侧导航栏的 ,在右侧页面中单击进入数据地图。
查找表
在左侧菜单栏,单击。进入查找表的页面。支持您在搜索框中输入表名、表描述等查找该数据源中包含关键字的所有表,您还可以单击左侧字段类目,在输入框中输入字段名称、字段描述等关键字搜索该数据源中包含关键字的所有字段。同时还可以通过表所在类目、项目或数据库进行表过滤。类目配置请参见配置管理。
对于搜索结果,您可以执行如下快捷操作:
申请权限:您可以在安全中心申请表权限,并在数据地图查看申请记录。详情请参见申请和管理表权限。
加入专辑:您可以将当前表添加到目标数据专辑,在目标数据专辑详情页面中进行表管理。详情请参见业务视角管理:数据专辑。
收藏表:您可以收藏或者取消收藏不需要的表。
查看血缘:单击后,您可以查看该表基于调度作业、数据同步等实际数据流转情况解析得出的表和表、字段和字段之间的血缘关系,暂不包含临时查询等手动操作产生的血缘关系。详情请参见查看血缘信息。
查看DDL:单击后,在生成DDL语句对话框中,查看或复制当前表的建表语句。
查看表详情
在查找到的表结果列表中,单击目标表名称,即可进入表详情页面查看表详细信息:
功能 | 说明 | 相关文档 |
快捷操作 | 您可以在页面上方对表进行申请权限、将表加入数据专辑/查看专辑、收藏表、在数据服务页面生成API、在SQL查询页面通过编写SQL语句进行数据查询与分析等操作。 | |
表基础信息 | 您可以在表基础信息区域查看表的浏览次数、读取次数、收藏次数、生命周期 、审批负责人、Table Owner、表类型等信息。 | |
表模型信息 | 用于查看当前模型表所属的数仓分层、业务分类、存储策略等信息。 单击查看模型,即可进入 页面,查看创建的模型表。您可以在表编辑页面,修改表信息、发布表、查看表的操作日志或进行表模型的数据开发。说明 仅DataWorks智能数据建模生成的表会显示模型信息。 | |
表权限信息 | 用于查看您当前拥有的表权限,您可以单击点击查看,进入表权限申请页面申请权限。 | |
表技术信息 | 用于查看DDL最后变更时间、最后数据变更时间和最后查看时间。 说明 最后查看时间:
| - |
明细信息 | 用于查看表的字段信息、分区信息和变更记录。 | |
产出信息 | 如果表的数据会随着对应的任务周期性发生变化,您可以单击产出信息,查看该表对应的生产任务的运行信息。此数据为离线统计,有T+1的延迟。 | - |
血缘信息 | 用于查看引擎节点内部或引擎节点间的血缘关系,您也可以查看当引擎作为数据源时,与产出的数据接口API之间的血缘关系。此外,MaxCompute还支持基于离线同步的完整链路血缘查看。此数据为离线统计,有T+1的延迟。 说明 如需从API视角查看上游(数据源)和下游(APP)的完整端到端血缘链路,请参考查看API详情。 | |
使用说明 | 您可以进行编辑、查看历史版本和查看markdown语法等操作,根据数据的业务说明了解相关的信息。 | - |
数据质量 | 为您展示当前表配置的数据质量监控规则详情及DQC告警列表,您可以单击右侧的配置规则跳转至数据质量页面为表配置质量监控规则。 | |
使用记录 | 通过频繁关联和访问统计维度为您展示表的使用记录。
| |
数据预览 | 可以预览当前表中的随机20条数据。 | - |
数据洞察 | 您可以为表创建数据洞察,通过深度数据分析和解读来获取数据统计及分布情况。 说明 当前仅华东1(杭州)、华东2(上海)、华北2(北京)、华北3(张家口)、华北6(乌兰察布)和华南1(深圳)地域支持此功能。 |
查看表基本信息
查看明细信息
查看血缘信息
查看表的使用记录
查看数据洞察
申请和管理表权限
您可通过DataWorks安全中心申请MaxCompute表的查询与操作权限,并在数据地图查看申请记录。
申请表权限
进入表详情页面,单击申请权限。
说明如果表被隐藏,则不会显示申请权限按钮。
默认进入新版安全中心的权限申请页面。详情请参见MaxCompute数据访问权限控制。
管理表权限
在数据地图左侧菜单栏,单击我的数据。
在左侧导航栏,单击权限管理。
您可以在权限管理页面申请函数和资源权限,并查看待我审批、申请记录和我已处理的。您可以设置权限有效期,超过申请权限时长时,系统将自动回收该权限。详情请参见查看和管理权限。
管理MaxCompute表
使用数据专辑管理表
您可以将当前表加入目标数据专辑中,在目标数据专辑详情页面进行表管理,或者查看当前表已经加入的相关数据专辑。详情请参见业务视角管理:数据专辑。
配置类目导航管理表
您可以在数据地图左侧菜单栏单击配置管理>类目管理配置,配置类目导航对MaxCompute表进行管理。详情请参见配置管理。