使用kafkaspout进行风暴性能调整

时间:2015-07-24 07:25:41

标签: apache-storm

我一直在使用KafkaSpout对Storm拓扑进行性能调整。通过以下添加,我能够达到每秒12000个元组:

  • 否。工人:3
  • 否。主题分区:6
  • 否。喷口螺纹:6

storm.yaml设置:

TOPOLOGY_EXECUTOR_RECEIVE_BUFFER_SIZE, 16384
TOPOLOGY_EXECUTOR_SEND_BUFFER_SIZE, 16384
TOPOLOGY_MAX_SPOUT_PENDING, 10
TOPOLOGY_ACKER_EXECUTORS, 3

我的群集有3个主管。你能否建议我们应该做些什么来达到每秒超​​过5万?

0 个答案:

没有答案