postgresql - RDS Postgres 到 Kinesis 数据流，用于通过 AWS 胶水实时加载数据 - Thinbug

RDS Postgres 到 Kinesis 数据流，用于通过 AWS 胶水实时加载数据

时间：2021-01-19 06:23:36

标签： postgresql amazon-web-services amazon-kinesis

要求是实时从RDS POSTGRES加载数据到RDS oracle。

AWS Glue 是 ETL 工具。 AWS Glue 具有从 Kinesis 实时获取数据以进行流式处理的功能。

我正在努力将数据从 Postgres 带到 Kinesis。

有什么建议吗？？

1 个答案:

答案 0 :(得分：0)

我使用此链接将数据推送到 kinesis--

https://aws.amazon.com/blogs/database/stream-changes-from-amazon-rds-for-postgresql-using-amazon-kinesis-data-streams-and-aws-lambda/

注意事项-

使用 Ec2。
无需显式安装 wal2JSON ，它已经存在。
它以某种 JSON 结构生成数据。根据需要将其更改为结构（目标数据库）
我使用了胶水 2.0。

如果有人遇到任何问题，请随时在此处发帖。会尽量回答。