Spark应用程序每次都使用不同的核心执行需要相同的时间

时间:2017-07-11 12:01:23

标签: c# apache-spark mobius

我正在尝试在总共3个节点的spark独立群集上运行spark应用程序。

群集中有3名工作人员,并且在一个节点中有ram,有4 GB,其余有8 GB Ram。

我正在执行具有不同内核的相同应用程序,如2,3,4,5但执行时间仍相同,执行应用程序

我使用sparkclr-submit

将应用程序传递给集群

谁能告诉我为什么会发生这种情况?

这是sparkUI的图像

感谢。

enter image description here

0 个答案:

没有答案