火花隐藏执行延迟

时间:2019-07-28 13:18:26

标签: apache-spark

您如何解释在像这样的某些阶段启动某些(或大多数)任务会遇到的巨大延迟

spark-1

Spark不会显示源代码……我希望这是由于“调度程序延迟”引起的,但是Spark声称不是。如果不是那样,那是什么?如何减少呢? 2秒似乎很小,但我的工作是反复进行的,并且有数千个这样的阶段...

spark-2

0 个答案:

没有答案