司机命令关机后,火花工人停了下来

时间:2016-12-06 10:29:44

标签: apache-spark apache-spark-standalone

基本上,主节点也作为从属节点之一执行。一旦主服务器上的slave完成它就调用SparkContext停止,因此该命令传播到所有从属服务器中停止执行的所有从服务器。

错误登录其中一个worker:

  

INFO SparkHadoopMapRedUtil:attempt_201612061001_0008_m_000005_18112:已提交

     

INFO执行程序:在阶段8.0(TID 18112)中完成任务5.0。 2536字节结果发送到驱动程序

     

INFO CoarseGrainedExecutorBackend:驱动程序命令关闭

     

ERROR CoarseGrainedExecutorBackend:RECEIVED SIGNAL TERMtdown

1 个答案:

答案 0 :(得分:0)

检查资源管理器用户界面,以防您看到任何执行程序失败 - 它详细说明了内存错误。但是,如果执行程序没有失败但仍然驱动程序要求关闭 - 通常这是由于驱动程序内存,请尝试增加驱动程序内存。让我知道事情的后续。