结构化流-什么是一次触发?

时间:2018-11-30 09:42:26

标签: python spark-structured-streaming

我们正在尝试将结构化流与Kafka集成用于一种用例。当我经历“批处理”间隔时,可以看到一次触发。

是否与“每日一次”(批处理)一样?

根据trigger the next pull会发生什么,还是我们需要schedule

1 个答案:

答案 0 :(得分:1)

如果我的理解是正确的,则没有机制可以安排下一批触发一次。因此,您可能需要手动安排它,例如crontab。