数据仓库(ETL):从MySQL到PostgreSQL的预定数据迁移

时间:2018-04-10 07:39:51

标签: mysql postgresql etl

我被分配了用于报告和数据分析的数据仓库任务。让我先解释一下我们要做什么。

第1步。复制生产服务器MySQL数据库。

第2步Scheduled ETL:读取已复制的数据库(MySQL)并将数据推送到PostgreSQL

现在我需要你的帮助第2步。

注意:我想要saveOrUpdate个功能。如果id可用,则更新或保存。数据将根据modified日期获取。

那么scheduled中有PostgreSQL数据推送可用的工具吗?考虑到我的要求。

如果没有可用的工具,我应该使用哪种编程语言进行ETL?和其他指针你可以提供给我实现这一目标。

dba.stackexchange.com上问了同样的问题https://dba.stackexchange.com/questions/203460/data-warehousing-etl-scheduled-data-migration-from-mysql-to-postgresql,但我猜它的用户群很低,所以在这里发帖。

1 个答案:

答案 0 :(得分:0)

在aws上你有DMS。我不知道你是否可以将它用于外部服务,但它的效果非常好。