获取Hadoop集群和作业统计信息

时间:2015-06-17 09:42:10

标签: java hadoop mapreduce resources

有什么方法可以获得我的群集上存活(运行),提交,失败的不同作业的详细统计信息?另外,我想获得每个作业的插槽利用率和每个队列的资源利用率 Hadoop ResourceManager的Web控制台已经这样做但我想要一些工具(具有更好的表示)或一些可以派生相同的Java库。

1 个答案:

答案 0 :(得分:1)

尝试http://host:port/jmx以JSON格式获取JMX(相应资源)的响应。

如果你想要与工作相关的统计数据使用:http://:50030 / jmx(在Hadoop 1中,我不确定Hadoop 2)。