全部产品
存储与CDN 数据库 安全 应用服务 数加·人工智能 数加·大数据基础服务 互联网中间件 视频服务 阿里云办公 培训与认证 物联网
批量计算

多任务

更新时间:2017-06-07 13:26:11

批量计算服务支持一个作业包含多个任务,任务之间可以有DAG依赖关系。

即前面的任务运行完成(Finished)后, 后面的任务才开始运行。

例1:

在 job description json 中这样描述:

{
  "Name": "my-job",
  "DAG": {
    ...
    "Dependencies": {
      "split": ["count"],
      "count": ["merge"]
    }
  }
}
  • split运行完成后,count开始运行,count完成后,merge才开始运行。
  • merge运行完成,整个作业结束。

例2:

在 job description json 中这样描述:

{
  "Name": "my-job",
  "DAG": {
    ...
    "Dependencies": {
      "split": ["count1","count2"],
      "count1": ["merge"],
      "count2": ["merge"]
    }
  }
}
  • split运行完成后,count1和count2同时开始运行,count1和count2都完成后,merge才开始运行。
  • merge运行完成,整个作业结束。
本文导读目录