控制哪个工作节点在部署模式集群中获取驱动程序

时间:2017-04-06 12:50:18

标签: apache-spark yarn cloudera-cdh

我使用--deploy-mode集群运行多个spark-submit applications。但是,似乎群集中只有一个节点正在为每个应用程序获取驱动程序。结果,这个节点的内存得到了很快的填充。

是否有办法指定群集中的哪个节点为使用spark-submit启动的每个应用程序分配了驱动程序。

0 个答案:

没有答案