标签: amazon-web-services monitoring amazon-data-pipeline
在我们的基础架构中,我们在将数据推送到Redshift之前有一堆ETL数据管道。我们使用s3存储桶进行日志,并使用SNS警报进行活动。大多数活动是标准的CopyActivity,RedshiftCopyActivity和SqlActivity。 我们希望将这些活动的所有可用指标都记录到仪表板上(例如:Cloudwatch),以便我们知道在一个地方发生了什么。遗憾的是,我没有找到关于AWS文档的大量信息,必须在代码中手动执行所有操作。
监控AWS Data Pipeline的最常用方法是什么?