Luigi Python中的MongoDB

时间:2016-10-04 06:58:18

标签: mongodb output luigi

我想知道是否有办法输出到Luigi的MongoDB。我在文档中看到它们支持文件(本地FS,HDFS),S3,PostgreSQL但不支持MongoDB。如果没有,有人可以解释我为什么不呢?拥有它可能是个坏主意吗?我想将数据存储在数据库中,因为我可以通过查询来探索它。但是,我使用mongodb,我不想安装另一个数据库。我不需要关系数据库,因为我只使用数据库来存储和查询(NoSql)没有关系,所以最好的选择是mongodb。

基本上我需要一个任务来读取数据并将其保存在数据库中。然后,下一个任务将获取此输出并处理数据。

任何建议,建议或澄清都非常受欢迎。谢谢!

1 个答案:

答案 0 :(得分:1)

您可以尝试使用mortar-luigi

查看MongoDB任务的this链接和this示例。