本文档为您介绍工业大脑数据工厂的任务管理功能。包括创建任务、上线/下线任务以及筛选搜索任务等。

创建任务

  1. 进入工业大脑的数据工厂控制台,单击数据汇聚
  2. 数据汇聚页面,单击业务系统 > 任务管理 > 创建任务
    任务管理页面
  3. 创建任务页面,选择数据源,以及该数据源中需要同步的表,然后单击下一步
    创建任务页面
  4. 配置同步参数。
    1. 配置参数页面,单击数据表右侧操作栏下的配置参数。或者选择多个数据表,单击下方的批量配置
    2. 配置参数对话框中,按照以下说明配置同步任务,完成后,单击提交
      配置参数对话框
      参数 说明
      任务类型 支持周期和实时的任务类型。周期类型即每隔多久同步一次数据,实时类型即实时地同步数据。
      同步类型 支持全量和增量。全量类型会将所有的数据进行同步,增量类型只会同步差异数据。
      生效日期 选择了生效日期后,调度将在有效日期内生效并自动调度,反之,在有效期外的任务将不会自动调度,也不能手动调度。
      周期 选择任务的调度周期,例如上图中设置每隔1分钟运行一次同步任务。
      依赖上一周期 勾选后,指定任务的上一个周期实例运行完成(包括正常完成和异常完成),才能运行下一个周期实例。
      运行异常,下线任务 勾选后,当任务的实例运行异常时,系统自动将任务下线。
      是否创建分区 选择创建时,需要设置分区值。分区值支持系统变量和常量。
      • 系统变量包括:

        ${bizdate}:定义为一个实例计算时对应的业务日期,业务日期默认为运行日期的前一天(格式yyyymmdd)。

        ${bizmonth}:业务月份默认为运行日期的上一月(格式yyyymm)。

      • 常量值使用英文单引号,如'hello'、'123'等。
  5. 参数配置完成后,单击创建
    任务创建成功后,会显示在任务列表页面。

上线/下线/删除任务


任务管理
  • 单击任务右侧操作栏下的上线/下线,可将任务部署到线上环境/从线上环境移除。您也可以选择多个任务,单击页面下方的批量上线/批量下线,实现批量上线/下线操作。
  • 单击任务右侧操作栏下的删除,可删除一个任务。您也可以选择多个任务,单击页面下方的删除选中,进行批量删除操作。

查看任务详情/字段信息

  • 单击任务右侧操作栏下的详细,可在任务详情页面查看接入数据总量增量数据统计趋势图
    任务详情页
  • 单击任务右侧操作栏下的字段,可在查看字段页面查看对应表中所包含的字段信息。

筛选/搜索任务


筛选/搜索任务
  • 支持按照任务类型任务状态筛选任务。
  • 支持按照任务名称搜索任务。