如果我登上应用程序,调度哪个节点,nodemanager或worker,那么在Yarn上运行Spark?

时间:2017-08-28 13:59:44

标签: apache-spark yarn hadoop2

Spark集群和Hadoop是独立的。 Nodemanager和worker节点不重叠。

1 个答案:

答案 0 :(得分:0)

我建议你阅读这份文件。它提供了关于如何在纱线上运行火花的很好的解释。

https://www.cloudera.com/documentation/enterprise/5-4-x/topics/cdh_ig_running_spark_on_yarn.html