AWS MySQL至GCP BigQuery数据迁移

时间:2019-03-10 14:11:50

标签: mysql amazon-web-services google-cloud-platform google-bigquery aws-data-pipeline

我正在计划从AWS MySQL实例到GCP BigQuery的数据迁移。我不想迁移每个MySQL数据库,因为最后我想使用BigQuery创建一个数据仓库。

将AWS MySQL DB作为csv / json / avro导出到S3存储桶,然后转移到GCP存储桶是一个不错的选择吗?此数据管道的最佳做法是什么?

1 个答案:

答案 0 :(得分:1)

如果这是从MySQL到MySQL的迁移;还有其他可能的选择。但是在这种情况下,您提到的选项是完美的。此外,请记住,您的MySQL数据库将不断更新。.因此,您的目标数据库可能会丢失一些记录。.因为这不是实时数据库传输。 >