Apache Beam上的BigQuery迁移动态模式

时间:2017-09-07 15:25:03

标签: window google-bigquery beam

我正在尝试从Mongo编写一个ETL到BigQuery。由于在Mongo中没有修复模式,我需要在将数据流式传输到BigQuery之前更新模式。

所以我使用带有withSchemaFromView侧输入的窗口。 使用模式的窗口时出现错误:

  

尝试从非全局获取GlobalWindow的侧输入窗口   WindowFn

似乎BigQeryIO使用模式的全局窗口。有解决方案吗?

0 个答案:

没有答案