只有主节点使用Hadoop 2.6.0在4节点集群上工作

Question

我正在尝试设置和使用4节点Hadoop集群。 设置似乎很顺利，因为一切都在主节点和从节点中运行。

Master：DataNode，ResourceManager，SecondaryNameNode，NameNode，NodeManager

Slaves：NodeManager，DataNode

此外，日志显示没有错误。但是，当我尝试运行我的代码时，它与在单个节点上运行它所花费的时间大致相同。此外，任何从节点上的CPU活动都没有增加。

Slave可以ssh到主节点，主节点正在侦听正确的端口，...

有关如何追踪问题的任何帮助？

谢谢！

操作系统：Ubuntu 14.04.2 Hadoop版本：2.6.0

我见过相关问题，但对我没有帮助：

hadoop cluster is using only master node or all nodes

Hadoop use only master node for processing data

Answer 1

基本上你只有一个datanode和两个nodemanger。与单节点集群相比，它没有太多出色的配置。要检查是否发生了什么，您可以转到资源管理器UI。默认情况下，它在端口8088上。