如何在hadoop集群上安装Kafka?

时间:2015-09-11 11:47:26

标签: hadoop apache-kafka

我想在我们的HortonWorks Hadoop集群上安装最新版本的Kafka,该集群包含2个主节点,2个边缘节点和8个数据节点。计划是在8个数据节点框中的2个上安装Kafka。 Kafka每天需要处理多达几百万个事件,可能只有几批0.5Gb-1.2Gb的文件副本。

问题:我需要考虑对数据节点或kafka的任何特殊配置,以避免kafka(或数据节点)潜在的性能下降?

如何正常部署Kafka(在专用盒子上或者可以在数据节点上运行它)?

1 个答案:

答案 0 :(得分:0)

您可以通过Ambari安装kafka。 转到Ambari的主页 - >点击动作(左下角) - >点击"添加服务" - >选择" Kafka" - >选择节点 - >部署 - >你完成了。你的群集上有kafka

您可以在"附录A" http://hortonworks.com/hadoop-tutorial/simulating-transporting-realtime-events-stream-apache-kafka/