分析Hadoop网络带宽消耗的工具

时间:2013-06-27 11:10:13

标签: networking hadoop bandwidth network-monitoring

我想分析群集中的Hadoop 1.0.3带宽消耗。
我可以使用哪些工具来分析与所有hadoop组件相关的所有进程所使用的节点之间的带宽消耗:hdfs,jobtrackers,tasktrackers,datanode,namenode,heartbeats,data transfer ...
还想将带宽消耗与过程联系起来。
主要问题是它的进程不使用修复端口。如果可能,使用特定端口范围或接口/子接口来使用是否可行?

1 个答案:

答案 0 :(得分:2)

Ganglia监控提供了大量指标,当您在群集中激活时(虽然我不确定它是否提供带宽消耗)。

有关于herehere的信息以及一个不错的演示页here