Spark流式处理缺少微型批次

时间:2018-07-03 05:53:41

标签: spark-streaming

enter image description here我的Spark Streaming应用程序缺少一些微型批次。例如,火花窗口持续时间为300秒。 11:15的微型批次已成功完成。 之后,我直接看到了11:40的微型批次。 11:20、11:25、11:30、11:35的批次缺失。应用程序日志中也没有例外。

这也是一个间歇性问题,并不总是发生。

需要指向寻找方向的指针。谢谢。

0 个答案:

没有答案