当s3前置条件失败时,如何将aws数据管道标记为FINISHED而不是ERROR?

时间:2017-02-21 17:15:16

标签: amazon-s3 amazon-data-pipeline preconditions

我已经挣扎了几个星期才找到一个符合我预期效果的配置解决方案 - 也许我想要的是不可能......

这是我正在尝试做的事情:

  1. 检查S3存储桶中的任何文件
  2. 如果没有,请不要启动集群,只需将管道标记为“已完成”,否则启动集群并处理 文件
  3. 管道运行状况最终被标记为“错误” - IMO不是,它是预期状态(没有要处理的文件),但是,前提条件按预期工作并且群集没有开始 - 这就是我想要的。

    当S3存储桶中没有文件时,是否可以发布一些示例配置,显示我需要配置的内容以使管道进入“FINISHED”状态,而不是“ERROR”?

    非常感谢,

    戴夫

0 个答案:

没有答案