Hadoop的安装,多节点

时间:2017-09-06 00:47:48

标签: hadoop hadoop2 hadoop-streaming hadoop-partitioning

大家好我正在尝试安装多节点hadoop安装。一切正常,但我的纱线节点管理器无法正常工作。当我查看Yarn nodemanager的日志文件时,我得到了以下信息

  

" org.apache.hadoop.yarn.server.nodemanager.NodeStatusUpdaterImpl:   初始化的nodemanager为null:physical-memory = -1 virtual-memory = -2   虚拟型磁芯= -1"

我不知道为什么它没有显示实际的内存和虚拟核心。我的VM有8GB内存和8Vcpus。由于上述值,我收到此错误:

  

" org.apache.hadoop.yarn.exceptions.YarnRuntimeException:已收到   来自Resourcemanager的SHUTDOWN信号,注册NodeManager   失败,来自ResourceManager的消息:来自SFeUbuntuVM2的NodeManager   不满足最小分配,向SHUTDOWN发送信号   节点管理器"

有人可以帮我解决这个问题吗?

1 个答案:

答案 0 :(得分:1)

检查您是否

  1. Selinux禁用
  2. 防火墙已停用
  3. 检查配置文件。

    <强> mapred-site.xml中

    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
    

    <强>纱-site.xml中

    <property>
        <name>yarn.resourcemanager.hostname</name>
        <value>{your host name}</value>
    </property>
    

    毕竟格式化您的namenode,然后再次启动所有服务。