使用apache beam sdk 2.2在GCS中不存在文件时引发异常

时间:2018-09-05 10:27:14

标签: google-cloud-platform google-cloud-storage apache-beam

在Apache Beam 2.1版本中,当数据流在Google Cloud Platform的GCS中找不到文件时,它将抛出FileNotFound异常并停止执行。

从2.2版开始,即使数据流找不到文件,它也会继续执行。

即使文件使用2.2版的Apache Beam在GCS中不存在时,是否有一种简单的方法来停止数据流?

1 个答案:

答案 0 :(得分:1)

问题在apache Beam的2.6版中得以解决。
现在,如果DataFlow找不到文件,它将引发异常。