Spark驱动程序,如何从所有工人那里收集数据?

时间:2019-04-23 09:08:30

标签: java apache-spark

想知道,让所有工人成功完成他们的工作,将结果提交到哪里(可能在主/驱动器机器中),那么驱动器机器的内存呢……?

1 个答案:

答案 0 :(得分:0)

因此,根据您在评论中的答案,答案是:没有在驱动程序上收集任何数据。对数据进行详细说明,并将其仅保存在执行程序中。仅当执行操作时,数据才会移动到驱动程序。 collect