在eventTime中触发结构化的流式SQL窗口

Question

对于这个完全相同的查询，等效的String SQL查询将如何：

val streamingWindowDF = 
  streamingInputDF
    .groupBy(
      $"sessiondId",
      window($"time", "10 seconds","2 seconds"))

我想做同样的事情，但使用SQL字符串类似：

val result = spark.sql(".....")

我想做的是一个滑动窗口。

谢谢。

Answer 1

window是valid SQL function，可以原样使用，即

SELECT COUNT(*)
FROM df
GROUP BY  window(time, '10 seconds', '2 seconds')

或简单的SELECT

SELECT *, window(time, '10 seconds', '2 seconds') AS w
FROM df