在S3中将数据流式传输到对象

时间:2018-02-06 12:18:25

标签: amazon-s3 boto3

我们有一个需要写入S3的输入流。此流有大量数据,我无法将其保留在内存中。我们不想写入本地磁盘,然后由于安全原因转移到S3。

有没有办法将数据流式传输到s3对象?

我认为我们的问题可以使用s3分段上传来解决。但是,这用于不同的目的 - 上传大文件。相反,是否有开箱即用的方式将数据流式传输到s3?

1 个答案:

答案 0 :(得分:1)

  

此流有大量数据,我无法将其保存在内存中。

因此,分段上传是解决此问题的正确方法。