使用过滤器对无限制的S3大小进行分页

时间:2017-08-24 01:30:57

标签: amazon-s3 lambda aws-lambda boto3

在我的存储桶中,S3具有无限数量的对象,其名称是创建它们的纪元值。 (例如" 1503379525") Lambda函数应该在特定时间范围(最后15分钟)之间连接所有文件的内容。

我的解决方案是使用:

  • 分页以获取对象列表
  • page_iterator.search("内容[?键> epoch-for-last-15-min] []")

我需要考虑Lambda的内存限制,并且需要确保paginator在具有无限数量文件的存储桶中正常工作。 这是一个可行的解决方案吗?

0 个答案:

没有答案