Spark流媒体:输出操作持续时间大于作业持续时间

时间:2018-03-02 05:07:29

标签: apache-spark spark-streaming amazon-emr

我在EMR上运行一个火花流应用程序。

我注意到在控制台上,Output Op Duration比实际Job Duration高出几个数量级。

Spark做什么Output Op Duration - Job Duration = delta

此处delta约为2.5分钟,这是不可接受的

Spark Streaming console

0 个答案:

没有答案