Question

我在YARN集群模式下使用spark-submit向Cloudera集群提交了一个spark作业。

我得到以下异常：

org.apache.spark.deploy.yarn.ApplicationMaster$$anon$2.run(ApplicationMaster.scala:187)
Caused by: org.jboss.netty.channel.ChannelException: Failed to bind to: /myip:0
    at org.jboss.netty.bootstrap.ServerBootstrap.bind(ServerBootstrap.java:272).

任何人都知道为什么应用程序主机无法绑定到驱动程序IP？

Answer 1

我找到了它！

除去

.set（“spark.driver.host”，“驱动程序计算机IP地址”）

来自您的驱动程序代码。

也发布了 spark-submit to cloudera cluster can not find any dependent jars

spark-submit：应用程序高手无法与驱动程序对话

1 个答案: