在Amazon EC2和S3之间传输文件

Question

我有我的应用程序在EC2上运行生成的日志文件。我想先将日志文件上传到S3中的存储桶。然后我运行map reduce作业，然后我想将输出文件下载回EC2。

从EC2和S3上传和下载文件的最佳方式是什么？是否可以使用EC2上的Shell脚本自动执行该过程，因为我正在使用Linux实例？另外，我是否需要修改s3存储桶的访问权限？

Answer 1

这是我用于s3的另一个工具：http://s3tools.org/s3cmd

Answer 2

您可以使用亚马逊休息工具来完成此任务。您需要访问密钥和安全密钥。使用那些可以使用通常已经安装在盒子上的工具将文件发布到s3服务器。

要获取它，您只需使用wget即可。