怎么知道没有。在地图作业中运行的节点

Question

输入拆分的数量是否确定mapreduce作业中正在运行的节点数。

我的意思是如果我有5个输入分割，这将使它们分布在5个节点上进行处理。地图任务的数量是否与节点数相似？

如何在clouderavm中检查

Answer 1

没有拆分不能确定节点数。

Hadoop群集，即NameNode，DataNodes和其他服务由Hadoop Admin根据数据大小设置。

在Cloudera VM上打开浏览器（Mozilla for CDH3），有一个书签Namenode状态。 单击它，Namenode包含有关您正在处理的群集的所有元数据。

要了解Map Reduce框架执行的工作信息，Job Tracker就在那里。