任务中心

更新时间: 2023-08-30 18:04:59

任务中心对数据资源平台中的数据同步、数据开发、标签加工等任务和实例进行运维管理。

数据资源平台各模块发起的任务,如数据同步、数据开发、标签加工等,都会发到对应的任务流,不同的任务来源通过业务类型区分。根据业务流程,任务流中包含了不同类型的节点,如MaxCompute离线任务、Flink流式任务等。不同类型的节点会生成各类任务,主要包括离线同步任务、离线计算任务、实时同步任务、实时计算任务等。对于离线同步任务、离线计算任务,每次运行时会生成该次运行周期的实例。

全局概览

支持查看任务流、任务、任务实例的统计信息,并提供以图形化的方式展示历史实例运行信息。

任务流

支持查看任务流的属性信息,包括任务流中包含的任务节点、任务节点信息、任务节点的最新实例等。支持查看任务流的部署、运行日志信息。

节点任务

支持查看节点任务的属性信息,包括节点任务的概览信息、部署/下线日志和手动运行日志。

实时任务

支持以列表的方式展示实时同步任务和实时计算任务信息,并提供当前实例属性与运行日志信息。

离线任务

支持查看离线计算任务的属性信息,查看离线同步实例、离线计算实例的属性与运行日志。

  • 离线同步实例:支持以列表的方式展示离线同步实例信息,并提供离线同步实例属性与运行日志查看;可进行实例重跑的功能。

  • 离线计算任务:支持以列表的方式展示离线计算任务信息,并提供运维、下线、删除的功能。

  • 离线计算实例:支持离线计算实例信息,并提供运维与日志的查看。

补数据计划

支持任务节点的补数据操作。

  • 新建补数据计划:支持在任务流和离线计算任务中补数据。

  • 终止补数据计划:支持补数据计划运行后进行终止操作。

  • 查看补数据计划:支持查看补数据的运行状态、节点类型、业务日期,以及查看对应节点的运维信息,包括实例信息、任务代码、实例日志。

阿里云首页 数据资源平台 相关技术圈