如何将ParDo应用于PDone对象

时间:2016-12-19 11:16:20

标签: google-cloud-dataflow

我的管道有两个步骤。

  1. 要从BigQuery中提取数据,然后进行翻译并存储CloudStorage。
  2. 要从CloudStorage中提取数据,然后进行翻译并存储S3。
  3. 在step1之后,我可以获得PDone对象,但它没有apply或read方法。 有没有办法在step1过程之后附加第2步过程?

1 个答案:

答案 0 :(得分:0)

您可以同时将从BigQuery提取的数据写入多个位置。例如。见this answer