计算Amazon S3存储桶大小

Question

我的要求是计算亚马逊s3上的各个存储桶大小。目前我正在使用 JetS3T 库。

使用 ThreadedStorageService.listObjects（）方法查找每个对象的大小，然后对其求和。即使该方法使用多个线程，它也需要很长时间才能列出存储桶中的所有对象。像对待80,000个物体一样需要45分钟。

还有其他方法可以更快的方式计算铲斗尺寸吗？

Answer 1

我怀疑你的线程数很低，因为这对你来说太慢了，试着把它搞砸了。您应该可以轻松地使用100个线程来完成工作。