从cron作业运行s3cmd get时，从s3存储桶下载失败

Question

我正在运行一个脚本来从s3存储桶下载文件。在cron中运行脚本。有时，脚本会失败，但是当我手动运行它时，它始终有效。 任何人都可以帮助我。

Answer 1

您的要求似乎是从Amazon S3下载所有新文件，以便您拥有所有文件的本地副本（不会重复下载）。

我建议使用AWS Command-Line Interface (CLI)，它有一个aws s3 sync命令。这会将Amazon S3中的文件同步到您的本地目录（或其他方式）。如果出现问题，它将尝试在下次同步时再次复制文件。