Hadoop Quirky Behavior

Question

有时在运行start-all.sh时datanode无法启动，但是当您重新启动计算机时，它可以正常启动。什么可能导致这种奇怪的行为？

在同一命名空间内运行的其他java进程是否会破坏hadoop进程？

Answer 1

以下是我观察到的一些事情。

1. hadoop namenode -format。此命令需要在start-all之前执行。否则namenode无法启动。
2. 同时检查您在hadoop上使用的应用程序是否符合应用程序所需的hadoop版本。在我的情况下，我使用hadoop 20.203，我切换到20.2我的问题解决了。
3. 检查日志，他们经常会对出错的地方提供有价值的见解。