Hadoop挂起,因为它无法通过主机名到达其他实例

时间:2016-05-03 15:27:33

标签: java hadoop yarn host resourcemanager

Hadoop作业在此步骤被接受后挂起。

INFO mapreduce.Job: Running job: job_1412689235580_0001

检查日志文件后,我在资源管理器日志文件中收到此错误。 下面提到的主机错误不是由我定义的。它不是我正在使用或访问的任何VM的名称。我无法弄清楚它是从哪个主机名取得的。

log error page

我的core-site.xml是: -

<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://hadoopmaster:9000</value>
</property>
</configuration>

我的yarn-site.xml是: -

<configuration>
<property>

<name>yarn.nodemanager.aux-services</name>
    <value>mapreduce_shuffle</value>

</property>  
<property>

    <name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
    <value>org.apache.hadoop.mapred.ShuffleHandler</value>

</property>
<property>
<name>yarn.resourcemanager.resource-tracker.address</name>
    <value>HadoopMaster:8025</value>
</property>
<property>
    <name>yarn.resourcemanager.scheduler.address</name>
    <value>HadoopMaster:8035</value>
</property>
<property>
    <name>yarn.resourcemanager.address</name>
    <value>HadoopMaster:8050</value>
</property>
</configuration>

/ etc / hosts文件内容: -

127.0.0.1       localhost 
127.0.1.1       servervm.cse.abc.ernet.in cse.abc.ac.in abc.ernet.in i$ 

# The following lines are desirable for IPv6 capable hosts 
::1     ip6-localhost ip6-loopback 
fe00::0 ip6-localnet 
ff00::0 ip6-mcastprefix 
ff02::1 ip6-allnodes 
ff02::2 ip6-allrouters 

179.16.114.11 HadoopMaster 
179.16.114.12 hadoopslave1 
179.16.114.13 hadoopslave2 
179.16.114.14 hadoopslave3

我卸载了整个群集并进行了全新安装,仍面临同样的问题。 我在我的vms和Hadoop 2.6.0上使用Ubuntu 12.04

0 个答案:

没有答案