如何在集群Spark中使用所有核心？

Question

如何将群集Spark上的所有内核用于进程？

我无法配置所有内核以在群集Spark中运行我的进程。

Answer 1

除了注释中提到的内容-在执行程序中设置内核数外，我建议还考虑分区主题。否则，您可能会使用所有内核，但是什么也不做。