如何在不调用apache-spark

时间:2019-03-21 20:12:18

标签: apache-spark

我们遇到 mapGroupswithState 状态处理问题。

要求:摄取所有数据和groupBy键,并为 那个状态。然后在超时到期后,我们要触发它关闭 流系统。帮助我了解state.hasTimedOut是否被调用,即使 我们不使用特定键调用函数方法 发生超时?例如,Alarm1具有状态,并且超时了吗? 对该特定状态有任何暗示或触发?

我们对流数据进行很少的转换,我们要做的就是发送 向每个组状态的下游系统发出警报。有没有 我们可以将超时的数据发送到下游的方式如果火花结构化 流媒体不适合这种情况,是否还有其他技术可以 可以解决这个用例。

0 个答案:

没有答案