我正在使用s3cmd 1.1.0beta将大于5 GB的文件上传到Amazon S3。这是因为早于1.1.0的s3cmd无法上传大于5 GB的文件(亚马逊单部件上传限制),并且最新的测试版能够使用多部分上传将这些文件上传到S3。
问题是:我无法对通过s3cmd 1.1.0上传的大于5 GB的文件执行任何操作。我怀疑这可能会发生,因为s3cmd设置的Etag与亚马逊预期的Etag不匹配:
具体问题如下(均通过Web控制台):
有没有办法在大于5 GB的文件中修复Etags,以便我能够对这些文件执行操作?
答案 0 :(得分:1)
好的,经过一些调查后,我发现问题与Amazon S3无法原生处理大小超过5 GB的文件有关。
为了在大小超过5 GB的文件上复制或执行任何操作,您必须专门使用Amazon的多部分上载和相关API来处理大型文件。
显然,即使是亚马逊的AWS Web控制台也只使用简单的API,这些API仅适用于大小小于5 GB的文件,因此如果您想对大于5 GB的文件执行任何操作,则需要编写您自己的代码使用AWS API来操作这些文件!