流文件日志到CloudWatch

时间:2018-09-05 07:28:37

标签: amazon-web-services amazon-cloudwatch

我有一个使用docker-compose运行Docker的EC2实例。 我希望所有应用程序之一将所有日志写入文件,以将该数据异步发送到CloudWatch。最好有一个单独的容器,该容器与应用程序容器共享日志目录,并运行类似tail -f的东西并将输出发送到CloudWatch。

我不是专家,但是我想Filebeat可以执行类似的操作,但是不知道是否可以将其配置为发送到CloudWatch。

1 个答案:

答案 0 :(得分:0)

所以我最终使用了this docker image

这是我在docker-compose.yml中的服务

  cloudwatch:
    image: iconara/awslogs:latest
    command: "--region eu-central-1 --config-file /etc/awslogs/app.conf"
    volumes:
      - ./environment/cloudwatch/conf/awscli.conf:/etc/awslogs/app.conf
      - ./environment/cloudwatch/state:/var/lib/awslogs/
      - ./logs:/app-logs/general/
      - ./project/storage/logs:/app-logs/laravel/
      - ~/.aws:/root/.aws

我正在安装凭据,因此我可以将其用于在Mac OSX上进行开发,这在EC2实例上可能不需要,具体取决于您的设置。 我还安装了状态文件,以便在重新启动容器时不会两次推送相同的日志。

这是我的./environment/cloudwatch/conf/awscli.conf

[general]
state_file = /var/lib/awslogs/agent-state
use_gzip_http_content_encoding = true

[/app-logs/logs/laravel.log]
datetime_format = %Y-%m-%d %H:%M:%S
file = /app-logs/laravel/laravel.log
buffer_duration = 5000
#log_stream_name = {instance_id}
log_stream_name = development
initial_position = start_of_file
log_group_name = /app-logs/laravel/laravel.log
multi_line_start_pattern = {datetime_format}