我是hadoop的新手,并尝试在hadoop 2.6.0中设置带有两个数据节点的hadoop多节点集群。但是当我尝试运行mapreduce应用程序时,它没有运行或节省更多时间。但是所有的恶魔都是在每两个节点中运行良好。
[hadoop @ slave~] $ jps 13406 MRAppMaster 9225 NodeManager 9072 DataNode 13591 Jps [hadoop @ master hadoop] $ jps 10051 Jps 3015 NodeManager 2444 SecondaryNameNode 1853 NameNode 2894 ResourceManager 2079 DataNode fail the task
1.这个问题是由于内存问题而来的 一段时间有更多时间来运行应用程序 get more time
container_1455681046052_0008_01_000001-stderr的 log4j:WARN找不到logger(org.apache.hadoop.ipc.Server)的appender。 log4j:WARN请正确初始化log4j系统。
答案 0 :(得分:0)
尝试通过" mapred historyserver"来提升你的职业历史服务器。并再次提交工作