Apache Hadoop Windows 10-Datanode,资源管理器和Yarn在启动时立即关闭

时间:2019-03-26 05:20:55

标签: hadoop hdfs disk datanode

我已经按照教程设置了适用于Windows的Apache Hadoop,该教程可以在here中找到。我现在在Datanode,Resource Manager和Yarn cmd窗口中遇到问题,该窗口显示打开后3秒钟全部关闭,只有Namenode继续运行。到目前为止,这是我尝试过的过程:

  1. 以管理员身份运行CMD
  2. 使用命令start-all.cmd(这将打开Namenode,Datanode,Yarn和Resourcemanager cmd窗口)
  3. Datanode,Yarn和Resource Manager几乎在启动后立即发出关闭消息

SHUTDOWN_MSG: Shutting down ResourceManager at thood-alienware/...

SHUTDOWN_MSG: Shutting down NodeManager at thood-alienware/...

SHUTDOWN_MSG: Shutting down DataNode at thood-alienware/...

  1. 有趣的是,只有Datanode窗口给出错误作为关闭的原因:

2019-03-26 00:07:03,382 INFO util.ExitUtil: Exiting with status 1: org.apache.hadoop.util.DiskChecker$DiskErrorException: Too many failed volumes - current valid volumes: 0, volumes configured: 1, volumes failed: 1, volume failures tolerated: 0

我知道我可以编辑允许的故障数量,但是我想实际修复导致此磁盘故障的任何原因。当我打开datanode目录时,它是一个空文件夹,但是我的namenode目录中包含从“ start-all.cmd”创建的文件。以前有人在Windows上使用Hadoop吗?我完全不知所措,因为大多数在线帮助都是针对Linux系统的。

1 个答案:

答案 0 :(得分:0)

您是否在HADOOP目录中获得了以下bin文件

https://github.com/s911415/apache-hadoop-3.1.0-winutils