在并行任务上只使用一个核心的火花

Question

所以我有这段代码：

String

虽然它会释放所有火花，但它会使用所有核心。

但是当它开始执行任务（索引）时，它只在100％上使用1个核心。

如何让一个spark任务使用所有核心？

Answer 1

问题在于python本身没有使用所有核心。我实现了多线程。

感谢所有帮助过的人。