从S3并行读取

时间:2014-08-25 21:36:31

标签: multithreading amazon-s3 parallel-processing

从S3(或同一个存储桶中的一组文件)执行大量并行读取文件时是否存在问题?

我发现下载的数据存在一些不一致之处,我想知道这是不是问题。

有关修复的任何建议吗?

1 个答案:

答案 0 :(得分:0)

S3不是强大的组合系统。最终编组或写后读取取决于您选择的区域。请参阅"问:Amazon S3使用什么数据一致性模型?" http://aws.amazon.com/s3/faqs/了解更多细节。