连续将数据从AWS Aurora MySQL移至AWS S3

时间:2019-05-13 14:27:11

标签: amazon-web-services amazon-s3 amazon-kinesis amazon-rds-aurora amazon-kinesis-firehose

我正在尝试设置数据湖并将所有数据移至s3。 我必须将aurora mysql数据移动到s3(最有可能采用拼花格式)。 我尝试使用Data Migration Service进行初始POC,以便我们可以一次移动所有数据。问题是每次我运行它都会复制整个数据。 我想要类似s3中数据库更改的近乎实时的反映。

谢谢。

1 个答案:

答案 0 :(得分:0)

如果启用二进制日志,则应该能够进行更改数据捕获并复制正在进行的更改,如this blog post

所述