保存渲染的AirFlow DAG

时间:2019-01-08 19:32:10

标签: airflow

出于演示目的,我有一个相对简单的DAG:

generate_permutations >> process_permutations_subdag >> clean_up

  1. generate_permutations产生一个文本文件
  2. process_permutations_subdag读取以为DAG声明中的每一个生成任务(使用for循环)
  3. 文本文件被clean_up
  4. 删除

当我在process_permutations_subdag任务之后查看clean_up的图形视图时,它没有显示任何任务(因为原始文件不再存在,并且for循环不执行)。 / p>

是否有一种在执行时渲染DAG的方法(并且不使用当前可用的文件),因此我可以查看历史上已运行了哪些任务(以及它们在甘特图上花费了多长时间)。 / p>

或者,有更好的方法来应对上述挑战吗?

0 个答案:

没有答案