管理采集实例

采集实例是采集任务根据定时调度时间或手动运行任务生成的实例任务。本文为您介绍如何查看及管理采集实例。

权限说明

超级管理员、系统管理员和具有采集实例-管理权限的自定义全局角色支持查看及管理采集实例。

操作步骤

  1. 在Dataphin首页,在顶部菜单栏选择治理 > 元数据

  2. 单击左侧导航栏的采集实例,进入采集实例页面。

    采集实例页面为您保留最近7天运行过的实例记录,包括实例的名称、数据源类型、数据源和数据源编码、任务负责人、执行方式、执行人、执行状态、运行时间信息。

    • 数据源:您可以单击数据源的名称,跳转至管理中心 > 数据源管理查看该数据源的信息。

    • 执行状态:在采集实例列表中查看相应实例的执行状态,执行状态分为成功、失败、运行中、等待中、未运行/暂停,且仅针对单个操作,相应执行状态下可执行的操作如下表。

      执行状态

      操作项

      成功

      采集变更概览、查看运行日志、查看采集任务。

      失败

      重跑、查看运行日志、查看采集任务。

      运行中

      终止、查看运行日志、查看采集任务。

      等待中

      终止、查看采集任务。

      未运行/暂停

      查看采集任务。

  3. (可选)您可以根据实例的名称搜索目标实例,也可以快捷筛选我负责的任务实例、我执行的、执行失败的实例,或者根据实例的执行状态、数据源类型、数据源环境、数据源、任务负责人、执行人、执行方式筛选目标实例。

  4. 在目标实例操作列下可进行如下操作。

    操作

    描述

    采集变更概览

    单击操作列下的image图标。为您展示本次采集对比上一次采集成功后元数据清单的变动情况,包括数据源、采集范围、采集策略、对象统计、新增对象统计、更新对象统计、删除对象统计、表明细、视图明细、字段明细信息。

    • 对象统计:为您展示本次采集成功后,从指定数据源采集到的对象统计值。

    • 变更概览列表:根据采集策略,为您展示对比上一次采集成功后的元数据新增、更新、删除情况。

    • 表明细:您可以单击操作列下的查看图标或单击表明细页签,查看表的新增、更新、删除变更明细,包括表名称、所属schema、表描述、变更类型。

    • 视图明细:您可以单击操作列下的查看图标或单击视图明细页签,查看视图的新增、更新、删除变更明细,包括视图名称、所属schema、视图描述、变更类型。

    • 字段明细:您可以单击操作列下的查看图标或单击字段明细页签,查看字段的新增、更新、删除变更明细,包括字段名称、所属表、所属schema、字段描述、变更类型。

      说明

      OraclePostgreSQLMicrosoft SQL ServerSAP HANAIBM DB2Hologres数据源支持展示所属schema信息。

    重跑

    • 重跑单个实例:单击操作列下的image图标,可重跑失败的实例。

    • 批量重跑:选择多个实例或单击底部全选后,单击底部的image图标,可重跑失败的实例。

    说明

    重跑执行可能需要较长的时间,请耐心等待。

    终止

    仅运行中、等待中状态的实例支持终止操作。

    • 终止单个实例:单击操作列下的image图标,仅运行中、等待中状态的实例支持终止操作。

    • 批量终止:选择多个实例或单击底部全选后,单击底部的image图标,仅运行中、等待中状态的实例支持终止操作。

    说明

    终止后实例的执行状态将被置为失败。适用于采集源无法连接、采集任务配置异常、系统异常等导致采集任务需要提前终止运行或无法正常运行结束的场景,可手动终止后通过运行日志排查异常原因。

    查看运行日志

    单击操作列下的image图标。为您展示最近一次运行的实例运行日志。每个采集任务对应一组工作流,您可以通过左侧节点列表切换查看单个节点的运行日志,也可以通过节点ID或节点名称进行搜索或通过运行状态进行筛选。

    查看采集任务

    单击实例的名称或操作列下的image图标。支持跳转至采集任务列表页面,系统会为您筛选出该实例对应的采集任务。