NiFi站点到站点数据流很慢

时间:2018-10-23 15:51:58

标签: apache apache-zookeeper minify apache-nifi

我有多个独立的NiFi实例(大约10个),我想使用它们使用RPG(站点到站点)将数据发送到NiFi群集(3个NiFi实例)。但是,从独立实例到群集的流量似乎很慢。

  1. 这是正确的方法吗?
  2. NiFi允许多少个站点到站点连接?
  3. 站点间NiFi数据流是否有最佳实践?

1 个答案:

答案 0 :(得分:1)

您可能首先要排除网络。您可以SSH到独立节点之一,然后尝试将一个大文件从独立节点SCP锁定到NiFi集群中的一个节点。如果那很慢,则更多的是网络问题,您将无法做很多事情来使它在NiFi中更快地运行。

在NiFi中,您可以调整站点到站点配置的每一面...

在中央集群上,您可以右键单击远程输入端口并配置默认为1的并发任务。这是可以并发处理在端口上接收的数据的线程数。

在独立的NiFi实例上,您还可以配置用于将数据发送到给定端口的并发任务。右键单击RPG,然后选择“管理远程端口”,然后更改该端口的并发任务。