Apache beam,使用java 8 lambdas处理错误/侧输出

时间:2017-09-06 15:30:28

标签: google-cloud-dataflow apache-beam

任何人都可以使用Java8 Lambdas提供有关如何使用ParDo处理无效输入的例子,我们可以在这篇优秀的博文https://cloud.google.com/blog/big-data/2016/01/handling-invalid-inputs-in-dataflow中找到相同的逻辑。或者我只是使用DoFnbeam 2.1.0

PS我正在使用{{1}}

干杯,

1 个答案:

答案 0 :(得分:1)

是的,你必须使用DoFn。转换MapElements / FlatMapElements不支持侧输出。