是否有传感器可以查找Google云存储中是否存在特定文件类型?

时间:2019-07-03 10:08:11

标签: google-cloud-platform google-cloud-storage airflow bucket google-cloud-composer

我要求作曲家轮询任务,直到它在存储桶中找到一个zip文件,并在满足条件后运行后续任务

我能得到的最好的是GoogleCloudStoragePrefixSensor。但这是带前缀的,不适用于此要求。

1 个答案:

答案 0 :(得分:0)

如果您想轮询,则考虑定期(按计划)列出存储桶中的文件,并查看哪些文件以“ .zip”结尾。另外,如果您只愿意接受到达的新文件,请考虑通过PubSub设置通知,以便当新文件到达存储桶时,将执行检查文件名的功能。

相关问题