将大量数据同步到s3（aws）

Question

我需要将2.5TB的数据从文件系统同步到AWS中的s3。

我将使用AWS CLI命令：

＆＃34; aws s3同步。 s3：// MyBucket＆＃34;

此命令将当前文件夹同步到s3中名为MyBucket的存储桶。

我的问题是：

1）是否有可能在没有超时的情况下一次性完成？

2）考虑到数据量，我期望的限制/问题是什么？

Answer 1

假设您在谈论单个文件或一些非常大的文件？如果是这样的话：

1）是的，文件将以小部分上传，因此您不必担心这类事情。 2）这将需要很长时间，这是不可避免的。如果上传对于给定文件部分失败次数太多，则上传将中止。