使用AWS Glue连接到“本地” postgresql数据库

时间:2019-09-09 18:14:26

标签: amazon-web-services etl aws-glue amazon-vpc

我有一个实际上在“前提下”的PostgreSQL数据库,但是我有凭据和JDBC连接字符串。我想阅读有关AWS胶水的表格,并将其用作作业中的源,然后写入S3。

但是它要使用VPC吗?我不明白我可以在Job中对连接进行硬编码吗?对于ETL环境,这似乎是一项基本任务。我想念什么?

1 个答案:

答案 0 :(得分:0)

Glue可以使用JDBC连接到任何数据库。这是快速跟踪pyspark编码的好工具箱。

基本上,您需要了解您在AWS环境中的物理位置。并识别或创建一个VPC。从那里建立您的ACL和安全组。

祝你好运!