Apache Spark比UI显示的时间更长

时间:2017-12-31 02:55:36

标签: pyspark

我在PySpark中运行了一系列步骤。完成大约需要56分钟。但是当我进入用户界面时,我只能在一个阶段看到9-12分钟的故障,而所有其他阶段都是以毫秒为单位。有什么方法可以减少等待时间以及9-12分钟的运行时间吗?

非常感谢你的时间。感谢。

0 个答案:

没有答案