我正在尝试在BigQuery中导出查询结果,并将数据获取到Postgres中。数据可能多达2.5亿条记录,约26Gb。
选项1:
将查询结果保存到临时表中 将表格导出到CSV 批量上传到Postgres
(这会很慢)
选项2:
以某种方式让两个DB直接讲话 我不知道这是否可能
谢谢您提供任何信息!
答案 0 :(得分:1)
此BigQuery Foreign Data Wrapper for postgreSQL允许您直接在PostgreSQL中查询BigQuery。使用此语句和SELECT INTO语句应该可以使您高效且直接地从BigQuery复制到PostgreSQL。