如何使用scriptella从亚马逊S3读取文件并加载到数据库中说postgres。有关如何为aws S3构建新连接器的任何指示?

时间:2013-06-01 16:44:26

标签: etl scriptella

如何使用scriptella从amazon S3读取文件。我没有看到任何S3连接器。一般来说,如何使用http / https访问远程文件集。增强AbstractConnection来实现这一点是多么容易。欢迎任何指示。

1 个答案:

答案 0 :(得分:0)

由于你可以在没有身份验证的情况下访问这些文件,你可以使用相同的连接器,如果本地的文件应该使用它们:它们应该支持http网址(我只尝试使用csv驱动程序和dropbox中的csv文件并且它有效) :

<connection id="in" driver="csv" url="http://hostname.s3.amazonaws.com/csv_files/file1.csv"/>