应该连续运行的正在运行的spark流式传输作业突然退出并出现以下错误(在执行程序日志中找到):
2017-07-28 00:19:38,807 [SIGTERM handler] ERROR org.apache.spark.util.SignalUtils$$anonfun$registerLogger$1$$anonfun$apply$1 (SignalUtils.scala:43) - RECEIVED SIGNAL TERM
火花流式传输作业在接收到此信号之前运行了约62小时。
我在执行程序日志中找不到任何其他ERROR / WARN。不幸的是我还没有设置驱动程序日志,因此我无法更深入地检查这个特定问题。
我在独立模式下使用Spark群集。
驱动程序可能发送此信号的任何原因? (在火花流动良好且超过60小时之后)