我正在使用Spark API(Spark核心API,而不是Stream,SQL等) 我经常在spark dumped日志中看到这种错误: Spark环境:1.3.1纱线客户端
ERROR executor.CoarseGrainedExecutorBackend: RECEIVED SIGNAL 15: SIGTERM
我按Ctrl + c,但那应该是SIGINT。如果YARN杀死执行者,那就是SIGKILL。
答案 0 :(得分:2)
您可能会在纱线日志中找到原因。如果激活了日志聚合,则可以键入
yarn logs -applicationId [app_id]
并查找异常。