N元素窗口的火花流

时间:2019-03-27 07:45:28

标签: scala apache-spark spark-streaming

在使用Scala或Java的Spark Streaming中,如何拥有一个始终包含最新N元素的流?

我熟悉使用window(windowLength, slideInterval)之类的方法创建窗口流的可能性。这里,windowLengthslideInterval都是时间间隔。在为流的长度和间隔指定行(即元素)计数时是否有等效项?

如果没有提供针对此类情况的API,您将如何自己实现?

0 个答案:

没有答案