持久存储LUIGI中的作业状态

时间:2016-06-29 06:19:14

标签: luigi

我最近刚开始使用LUIGI并且几乎没有问题,我无法使用documentation来回答自己

关于LUIGI的工作状况的问题 使用Luigi,我们可以设置一些全局配置(record_task_history)来跟踪作业历史,并且需要设置一个mysql DB。然后可以通过luigi visualizer检索并显示该历史记录。

  1. 是否支持其他持久性存储?这可以在文本文件中完成吗? (如果我可以通过编程方式获得历史状态,Visualizer可能无法正常工作,但我可以正常使用)

  2. luigi什么时候实际将状态数据写入持久性存储?作业完成后,是否将其保留在内存中以运行作业和转储数据?

  3. - 学习者

1 个答案:

答案 0 :(得分:0)

  1. 它支持SQL Alchemy支持的任何商店。 如果不使用外部存储,则不保存状态(仅限日志文件)。始终根据输出的存在来检查任务的状态。

  2. 您应该检查源代码。 :d。