NiFi GetMongo永久获取数据

时间:2018-10-04 10:55:50

标签: apache-nifi

我在MongoDB中有数百万条记录,并且我想使用NiFi来移动数据。这是我要运行的方案:

1)我将设置NiFi

2)NiFi会自动获取100条记录的记录。

3)完成后,将在添加新条目时获取。

我尝试将这种情况与一个较小的MongoDB集合(从mongo提取并存储为文件)一起应用,并且我发现NiFi会永远重复此过程,并且会重复记录。

这是我在NiFi上创建的流程: a simple flow for NiFi

是否有解决此问题的建议?

1 个答案:

答案 0 :(得分:2)

很遗憾,GetMongo没有状态跟踪功能。我已经解释过类似的问题。您可以找到它们: