Mesos Future被丢弃了

时间:2017-09-11 11:58:57

标签: apache-spark mesos

我正试图通过Mesos运行一个火花工作

它抛出异常

  

警告MesosExternalShuffleClient:无法注册应用程序   6c1b7274-960f-47ef-9fa7-1dd06b05d4f1-0010

使用外部随机服务。

请在驱动程序退出后手动删除随机数据

  

错误:了java.lang.RuntimeException:   java.lang.UnsupportedOperationException:意外消息:   org.apache.spark.network.shuffle.protocol.mesos.RegisterDriver@88d86a24   “

和Stderr中的日志

  

ERROR CoarseGrainedExecutorBackend:收到的信号期限       INFO DiskBlockManager:关闭挂钩调用       E0911 05:32:34.711486 6619 process.cpp:951]无法接受套接字:将来丢弃**

在Spark-Defaults.conf中

spark.mesos.coarse          true
spark.network.timeout           3600s
spark.shuffle.io.connectionTimeout  3600s

谁杀了我的申请..?

0 个答案:

没有答案