使用Python将表从云存储加载到BigQuery

时间:2017-06-05 10:40:55

标签: python google-bigquery google-cloud-storage google-cloud-endpoints

有人可以分享一个作业配置示例,将json newline_delimited文件上传到新的Bigquery表吗?

尝试基于google文档执行此操作但到目前为止没有成功。

1 个答案:

答案 0 :(得分:2)

来自GCP存储库的

This example非常适合从GCS加载数据。

您在代码中唯一需要调整的是将guid设置为新的分隔json文件,如下所示:

job.source_format

(正确的做法是在函数中接收此参数作为输入,但这只是一个例子)。

此外,当您运行此代码时,该表应该已经存在(我在Python API中查找了模式自动检测,但似乎还没有)。