本地和独立之间的火花差异

时间:2020-04-24 14:19:18

标签: apache-spark

如果我使用local [*]运行Spark,然后稍后由2个工作程序(两个工作程序都引用同一台1台计算机)进行独立运行,

1 个答案:

答案 0 :(得分:0)

独立运行时,您正在为工作程序和spark主程序定义“容器”以在您的计算机中运行(这样您就可以拥有n个工作程序,并且您的任务可以在这两个工作程序的JVM中分发?),但是在本地模式下,使用n个线程在本地计算机的同一JVM中运行所有程序。

相关问题