将查询结果从BigQuery导出到Postgres

时间:2018-10-10 17:16:46

标签: postgresql google-bigquery

我正在尝试在BigQuery中导出查询结果,并将数据获取到Postgres中。数据可能多达2.5亿条记录,约26Gb。

选项1:

将查询结果保存到临时表中 将表格导出到CSV 批量上传到Postgres

(这会很慢)

选项2:

以某种方式让两个DB直接讲话 我不知道这是否可能

谢谢您提供任何信息!

1 个答案:

答案 0 :(得分:1)

BigQuery Foreign Data Wrapper for postgreSQL允许您直接在PostgreSQL中查询BigQuery。使用此语句和SELECT INTO语句应该可以使您高效且直接地从BigQuery复制到PostgreSQL。