我在hadoop-3.0.0-alpha2
部署了ubuntu 15.10
群集。详情如下:
有1 namenode
(主)和2 datanodes
(slave1& slave2)正在运行。
我可以通过' ssh slave1
'从主人那里登录奴隶。并且通过' ssh master
'
守护进程正常工作我可以通过jps看到它们。但是datanode没有显示在namenode webUI的livenodes中。
我检查了我的xml文件的所有配置,它们是正确的。仍然是livenodes为0.我的namenode和datanodes日志显示如下。
Namenode日志:
Datanode日志:
Core-site.xml:
fs.defaultFS
hdfs://master:9000
HDFS-site.xml中:
在Datanode:
dfs.replication
1
dfs.datanode.data.dir
file:/usr/local/hadoop_tmp/hdfs/datanode
在Namenode:
dfs.namenode.name.dir
file:/usr/local/hadoop_tmp/hdfs/namenode
mapred-site.xml中:
mapreduce.jobhistory.webapp.address
master:19888
mapreduce.job.tracker
master:54311
mapreduce.framework.name
yarn
纱-site.xml中:
yarn.nodemanager.aux-services
mapreduce_shuffle
yarn.nodemanager.aux-services.mapreduce.shuffle.class
org.apache.hadoop.mapred.ShuffleHandler
yarn.log-aggregation-enable
true
yarn.resourcemanager.resource-tracker.address
master:8025
yarn.resourcemanager.scheduler.address
master:8035
yarn.resourcemanager.address
master:8050
提前致谢。