ParDo中DoFn的状态

时间:2017-10-12 14:18:55

标签: google-cloud-dataflow apache-beam

我们是否有任何可以提供DoFn完成状态的内容,就像函数完成它的执行一样?

我们是否可以生成任何触发器或任何能够成功完成DoFn函数内部所有步骤的成功完成的内容?

任何帮助将不胜感激。

1 个答案:

答案 0 :(得分:0)

在ParDo中,您将始终知道函数何时完成,因此假设您想知道何时处理了整个PCollection - 您可以在应用ParDo后创建新的Pcollection,然后在新的PCollection上应用后续转换。例如。

deliver