动态写入Dataflow中的表

时间:2018-01-10 18:48:32

标签: google-bigquery apache-beam dataflow

在Dataflow中处理管道。我需要将值写入多个大查询表,其中所需的表名是PCollection中的值。 例如,类Data为:

 public class Data{
     public List<String> tableName;
     public String id;
     public String value;
}

我将有PCollection<Data>,我想将行(id, value)写入列表tableNames中的所有表格。

这在数据流中是否可行?我可以使用BigQueryIO.Write吗?

0 个答案:

没有答案