将Onprem文件移动到AWS S3

时间:2019-11-20 05:40:25

标签: amazon-s3 aws-lambda

需要将每日文件发送到AWS S3,然后将通过在特定时间在EKS中运行的批处理来完成计算。请建议我们如何将文件安全地发送到S3

此外,每个PUT都会在S3中创建一个新对象,因此我想在使用对象链接加载文件并将其保存到DynamoDB之后使用触发器。

该进程将按照其计划唤醒,并查看DynamoDB以找出要处理的正确S3对象。

请提出任何更好的方法

1 个答案:

答案 0 :(得分:0)

  • 您可以设置简单的cron作业,以在所需的时间间隔后将文件发送到S3。
  • 适用于S3的AWS开发工具包支持ssl(传输中),您可以使用它来安全 传输文件。
  • 您可以根据需要发送批量放置请求。
  • 创建一个特定于此人的用户,并仅授予其编程访问权限以承担具有所需权限的角色,以获取本地脚本中的临时凭据。