在AWS中将多个文件从一个存储桶移动到另一个存储桶会返回错误：超时

Question

我正在使用s3cmd将5000多个文件从一个存储桶复制到另一个存储桶中的文件夹。

像这样：

s3cmd mv --recursive -v s3://test.bucket/1111_stuff/ s3://actual.bucket/input/dataloader_input/

然而，这让我这样：

  

信息：检索s3的远程文件列表：//dataloader.bucket/1111_stuff/ ...
  信息：摘要：5186个移动的远程文件
  错误：超时

它被Retrieving list of remote files停留了很长一段时间，而我所有的一切都是错误的。

这是AWS方面的问题，还是我能解决的问题？还有其他办法吗？

感谢。

Answer 1

这看起来套接字超时，你可能想尝试将socket_timeout的值更改为180，大约3分钟，在.s3cfg

中

如果上述情况没有帮助，您可能需要阅读一些类似的问题

Can I move a file into a 'folder' inside an S3 bucket using the s3cmd mv command?

s3cmd failed too many times