Dataphin中小时调度的任务可以依赖天调度的任务吗?
更新时间:
概述
本文主要介绍Dataphin中小时调度的任务能否上游依赖天调度的任务。
详细信息
不建议小时调度的任务上游依赖天调度的任务,可能会出现每个小时跑的数据都一样的情况。对于这种情况,建议上游任务也是小时调度。或者上游任务中数据是定时更新的。
比如逻辑表上游是管道任务,管道任务给逻辑表的来源主表中同步数据,如果该管道任务是天调度的,逻辑表是小时调度的,那么逻辑表每个小时跑出来的数据都一样,这样只是在浪费计算资源,实际没有任何意义。对于该情况,建议管道任务也是小时调度的。
适用于
- Dataphin
反馈
- 本页导读
文档反馈