基本上,主节点也作为从属节点之一执行。一旦主服务器上的slave完成它就调用SparkContext停止,因此该命令传播到所有从属服务器中停止执行的所有从服务器。
错误登录其中一个worker:
INFO SparkHadoopMapRedUtil:attempt_201612061001_0008_m_000005_18112:已提交
INFO执行程序:在阶段8.0(TID 18112)中完成任务5.0。 2536字节结果发送到驱动程序
INFO CoarseGrainedExecutorBackend:驱动程序命令关闭
ERROR CoarseGrainedExecutorBackend:RECEIVED SIGNAL TERMtdown
答案 0 :(得分:0)
检查资源管理器用户界面,以防您看到任何执行程序失败 - 它详细说明了内存错误。但是,如果执行程序没有失败但仍然驱动程序要求关闭 - 通常这是由于驱动程序内存,请尝试增加驱动程序内存。让我知道事情的后续。