Nifi-将文件路由到两个不同的目录

时间:2020-03-08 08:47:22

标签: apache-nifi

我有一个用例,其中有一个包含约1000个文件的输入目录。我想将其路由到两个不同的目的地,例如directory1和directory2。我想将500个随机文件路由到directory1,其余500个文件路由到目录2。我的Nifi以群集模式设置,具有一个主节点和其他协调节点(仅两个节点)。我想平衡两个节点上的负载。

1 个答案:

答案 0 :(得分:1)

为平衡Nifi群集中的负载,您可以使用站点到站点的远程进程组

更多信息:

https://blogs.apache.org/nifi/entry/load-balancing-across-the-cluster

https://community.cloudera.com/t5/Community-Articles/NiFi-Understanding-how-to-use-Process-Groups-and-Remote/ta-p/245486

https://community.cloudera.com/t5/Support-Questions/Nifi-RPG-and-Clustering/td-p/150701

要在目录中路​​由文件的一半,在另一目录中路由另一半,则可以使用counter,然后根据此计数器在属性上进行路由。

一些信息:https://community.cloudera.com/t5/Support-Questions/How-to-count-the-flowfiles-from-incoming-queue-in-nifi/td-p/238951

相关问题