同步两个AWS Glue数据目录

时间:2019-07-16 11:17:38

标签: amazon-web-services aws-glue aws-glue-data-catalog

我有一个用例,我想同步两个驻留在不同账户上的AWS Glue数据目录。

当创建/删除新的数据库/表/分区时,Glue是否发出可以发布的通知?还是通过其他方式知道其他Glue数据目录中正在发生的事情?

一种方法是监听该Glue帐户的Cloudwatch通知,但是根据Doc Cloudwatch通知,这是不可靠的:

https://docs.aws.amazon.com/glue/latest/dg/automating-awsglue-with-cloudwatch-events.html

1 个答案:

答案 0 :(得分:0)

AWS为此目的提供了一个开放源脚本。参见here

不确定它的可靠性和快速性,但值得尝试。