从外部LAN使用火花簇的问题

时间:2016-02-12 12:02:57

标签: apache-spark

我正在尝试使用群集外部的spark集群。 问题是spark绑定到我的本地机器私有IP,它能够连接到主机,但由于IP问题,工作人员无法连接到我的机器(驱动程序)(他们看到我的私有IP,因为我的私人火花绑定IP)。 我可以从工人日志中看到: " - 驱动程序的URL" "火花:// CoarseGrainedScheduler @ PRIVATE_IP_MY_LAPTOP:34355"

任何帮助?

2 个答案:

答案 0 :(得分:0)

尝试将spark.driver.host(搜索here以获取更多信息)设置到您的公共 IP,然后工作人员将使用该地址而不是(自动解析的)私有IP。

答案 1 :(得分:0)

尝试将spark.driver.bindAddress设置为0.0.0.0,以便驱动程序可以侦听全局。