hadoop - Mapreduce Tasktracker列入黑名单

我们正在使用CDH 4.2和CM 5.0

最近我们注意到其中一个Tasktracker被列入黑名单，然后我不得不重新启动它以将其重新置于池中。所有机器都具有相同的配置和容量。但是，一台特定机器上的tasktracker会重复列入黑名单。

找出根本原因我挖掘了日志并找到了

9：32：28.117 AM错误org.mortbay.log / mapOutput java.lang.IllegalStateException：在org.mortbay.jetty.Response的org.mortbay.jetty.Response.resetBuffer（Response.java:1023）处提交。发送错误（Response.java:240）atg.apache.hadoop.mapred.TaskTracker $ MapOutputServlet.doGet（TaskTracker.java:4283）at javax.servlet.http.HttpServlet.service（HttpServlet.java:707）at javax.servlet .http.HttpServlet.service（HttpServlet.java:820）org.mortbay.jetty.servlet.ServletHolder.handle（ServletHolder.java:511）org.mortbay.jetty.servlet.ServletHandler $ CachedChain.doFilter（ServletHandler.java）：1221）org.apache.hadoop.http.HttpServer $ QuotingInputFilter.doFilter（HttpServer.java:1068）org.aport上的org.mortbay.jetty.servlet.ServletHandler $ CachedChain.doFilter（ServletHandler.java:1212）。 hadoop.http.NoCacheFilter.doFilter（NoCacheFilter.java:45）org.mortbay.jetty.servlet.ServletHandler $ CachedChain.doFilter（ServletHandler.java:1212）org.apache.hadoop.http.NoCacheFilter.doFilter（NoCacheFilter。 JA va：45）在Org.mortbay.jetty的org.mortbay.jetty.servlet.ServletHandler $ CachedChain.doFilter（ServletHandler.java:1212）org.mortbay.jetty.servlet.ServletHandler.handle（ServletHandler.java:399） .security.SecurityHandler.handle（SecurityHandler.java:216）atg.mortbay.jetty.servlet.SessionHandler.handle（SessionHandler.java:182）org.mortbay.jetty.handler.ContextHandler.handle（ContextHandler.java:766 ）org.mortbay.jetty.webapp.WebAppContext.handle（WebAppContext.java:450）atg.mortbay.jetty.handle.ContextHandlerCollection.handle（ContextHandlerCollection.java:230）at org.mortbay.jetty.handler.HandlerWrapper。在org.mortbay.jetty.HetpConnection的org.mortbay.jetty.HttpConnection.handleRequest（HttpConnection.java:542）的org.mortbay.jetty.Server.handle（Server.java:326）处理（HandlerWrapper.java:152） $ org.mortbay.jetty.HttpParser.parseNext（HttpParser.java:549）的$ RequestHandler.headerComplete（HttpConnection.java:928）org.mortbay.jetty.HttpParser.parseAvailable（HttpParser.java:212）a org.mortbay.jetty.HttpConnection.handle（HttpConnection.java:404）org.mortbay.io.nio.SelectChannelEndPoint.run（SelectChannelEndPoint.java:410）org.mortbay.thread.QueuedThreadPool $ PoolThread.run（QueuedThreadPool）的.java：582）

完整日志：http://pastebin.com/BrM47DZu

任何形式的帮助将不胜感激

由于

Mapreduce Tasktracker列入黑名单

1 个答案: