Firehose到S3:​​24小时尝试失败后数据会发生什么变化

时间:2017-09-06 05:59:48

标签: amazon-web-services amazon-kinesis-firehose

来自AWS文档:

  

由于诸如此类的原因,向S3存储桶的数据传送可能会失败   桶不再存在,Kinesis Firehose的IAM角色   假设无法访问存储桶,网络故障或类似情况   事件。在这些条件下,Kinesis Firehose不断重试   到交货成功的24小时。最大数据存储时间   Kinesis Firehose是24小时,如果数据传输,您的数据会丢失   失败超过24小时

  • 现在丢失的数据会怎样?
  • 是否有任何日志或指标可以检查此类故障?

我已在 DeliverytoS3.Success 指标上创建了警报(如果指标值<1表示1分钟,警报触发)。因此,无论何时在发送到S3时发生故障,它都会重试直到24小时,但是度量标准显示值&lt; 1表示该期间和警报触发。此外,我没有看到任何CloudWatch错误(S3Delivery)日志。

我的目标是仅在我们最终无法向S3发送数据时触发警报(即使在24小时后)。

注意:如果需要任何解释或更正,请与我们联系。

0 个答案:

没有答案