标签: etl airflow airflow-scheduler
我们使用apache气流作为平台来管理ML计划-启动培训,执行和外部依赖关系。 任务是原子性的-训练一个模型,运行一个模型等。
任务是在编译时/ dag初始化时安排的,其中某些任务很少发生(例如训练)。
当我们在网络服务器上浏览数据时,我们只会看到计划在下一批中运行的任务的历史运行统计信息,而看不到不经常计划的任务。
所以我想知道;是否可以查看不属于当前dag的任务的运行统计信息?