允许灵活的csv结构从gcs导入到分区的bigquery表中

时间:2017-04-10 22:25:28

标签: python csv google-bigquery gsutil

我在bigquery中有一个分区表,每周都会使用谷歌云存储中的csv文件进行刷新。在刷新过程中,整个表将被删除并重写。

新的列已添加到csv文件中,并且表结构已相应更新,但现在在刷新期间出现列不匹配错误,因为旧的csv文件不包含新列。

有没有办法在导入分区表时使用gsutil或bq命令行平滑地将列添加到旧的csv文件,而无需将每个文件下载到我的本地计算机上并更改csv的一个一个人?

0 个答案:

没有答案