如何在没有密钥的情况下将Airflow连接到AWS S3？

Question

我想将Airflow连接到S3，并能够从存储桶中获取数据。但是，有关如何执行此操作的唯一教程是使用AWS Secret Access Key。我不想使用它们。所以我想问一下Airflow是否支持其他任何方式连接到S3？

Answer 1

如果在EC2机器或ECS容器中运行Airflow，则可以从EC2实例配置文件中受益。这样，您无需设置任何凭据，任何boto3请求都将使用实例配置文件提供的身份验证权限。从Airflow方面，您可以只使用默认的aws_default，而仅在附加部分中设置区域。