谷歌云平台到S3 / Redshift

时间:2019-03-11 15:16:11

标签: amazon-s3 google-cloud-platform google-bigquery amazon-redshift

在Python中,是否仍以编程方式使用Python从Google云平台提取数据?我的最终目标是将数据从Google Big Query获取到Redshift。

2 个答案:

答案 0 :(得分:2)

您可能可以使用gsutil这样的命令将数据从Google Cloud Storage存储桶复制到Amazon s3存储桶

gsutil -m rsync -rd gs://gcs-bucket s3://s3-bucket

不需要python代码。

答案 1 :(得分:0)

您还可以查看https://rclone.org/,它支持跨许多云存储(包括Google Storage和AWS S3)复制数据。