Spark Streaming:跨批次汇总值

时间:2020-02-27 22:50:05

标签: scala apache-spark spark-structured-streaming

我们有一个Spark Streaming作业,可以计算每个批次中的一些值。我们现在需要做的是所有批次的合计值。在Spark Streaming中执行此操作的最佳策略是什么?我们应该为此使用“火花累加器”吗?

0 个答案:

没有答案