管理采集实例

采集实例是采集任务根据定时调度时间或手动运行任务生成的实例任务。本文为您介绍如何管理采集实例。

权限说明

超级管理员、系统管理员和具有采集任务与采集实例-管理权限的自定义全局角色支持管理采集实例。

操作步骤

  1. Dataphin首页的顶部菜单栏,选择治理 > 元数据

  2. 在左侧导航栏选择元数据采集 >采集实例,进入采集实例页面。

    采集实例页面为您保留最近7天运行过的实例记录,包括实例的名称、执行状态、数据来源和数据源编码、数据来源类型、运行时间、执行方式、执行人及任务负责人信息。

    • 数据源:您可以单击数据源的名称,跳转至管理中心 > 数据源管理查看该数据源的信息。

    • 执行状态:在采集实例列表中查看相应实例的执行状态,执行状态分为成功、失败、运行中、等待中、未运行/暂停,且仅针对单个操作,相应执行状态下可执行的操作如下表。

      执行状态

      操作项

      成功

      采集变更概览、查看运行日志、查看采集任务。

      失败

      重跑、查看运行日志、查看采集任务。

      运行中

      终止、查看运行日志、查看采集任务。

      等待中

      终止、查看采集任务。

      未运行/暂停

      查看采集任务。

  3. (可选)您可以根据实例的名称搜索目标实例,也可以快捷筛选我负责的任务实例、我执行的、执行失败的实例,或者根据实例的执行状态、数据源类型、数据源环境、数据源、任务负责人、执行人、执行方式筛选目标实例。

  4. 在目标实例操作列下可进行如下操作。

    操作

    描述

    采集变更概览

    单击操作列下的image图标。为您展示本次采集对比上一次采集成功后元数据清单的变动情况,包括数据源、采集范围、采集策略、对象统计、新增对象统计、更新对象统计、删除对象统计、表明细、视图明细、字段明细信息。

    • 对象统计:为您展示本次采集成功后,从指定数据来源采集到的对象统计值。

    • 变更概览列表:根据采集策略,为您展示对比上一次采集成功后的元数据新增、更新、删除情况。

    重跑

    • 重跑单个实例:单击操作列下的image图标,可重跑失败的实例。

    • 批量重跑:选择多个实例或单击底部全选后,单击底部的image图标,可重跑失败的实例。

    说明

    重跑执行可能需要较长的时间,请耐心等待。

    终止

    仅运行中、等待中状态的实例支持终止操作。

    • 终止单个实例:单击操作列下的image图标,仅运行中、等待中状态的实例支持终止操作。

    • 批量终止:选择多个实例或单击底部全选后,单击底部的image图标,仅运行中、等待中状态的实例支持终止操作。

    说明

    终止后实例的执行状态将被置为失败。适用于采集源无法连接、采集任务配置异常、系统异常等导致采集任务需要提前终止运行或无法正常运行结束的场景,可手动终止后通过运行日志排查异常原因。

    查看运行日志

    单击操作列下的image图标,查看最近一次实例的运行日志。每个采集任务对应一组工作流,您可以通过节点ID或节点名称进行搜索或通过运行状态进行筛选,或快捷筛选运行失败的日志,也可以通过左侧节点列表切换查看不同任务类型的运行日志:

    • 当任务节点为Dlink类型的节点,支持查看日志信息、异常信息、性能诊断、运行代码;其他任务类型的节点,仅支持查看日志信息。

    • 针对运行失败的节点,您可以单击重跑按钮,重新运行实例。

    • 当采集任务的采集频率为每月时,系统将默认生成空跑实例并用空跑标识,并直接置为成功;运行失败的节点,系统将根据采集任务配置的重试次数进行重跑,并以自动重试进行标识。

    查看采集任务

    单击实例的名称或操作列下的image图标,支持跳转至采集任务列表页面,系统会为您筛选出该实例对应的采集任务。