气流-暂停长时间运行的任务

时间:2019-10-23 14:30:52

标签: task airflow pause

我们面临一个问题,由于某些API的限制,例如,每天从01-05上午开始,每天只能运行几个DAG,因此任务应该在凌晨5点停止,并在第二天继续执行其余任务

有时候工作仅需要1个小时,因此我们的任务可以及时完成而不会出现问题,但有时由于大量的数据和处理,我们需要更多的时间并在第二天继续进行。

除了将TimeSensor或某种分支置于每个分支之前,是否有其他方法可以暂停任务?

谢谢!

0 个答案:

没有答案