logstash监控spark-on-yarn应用程序日志

时间:2015-08-03 16:11:50

标签: apache-spark logstash logstash-configuration

我在我的spark节点上安装了一个logstash。

问题是它无法从动态创建的容器的文件夹中收集所有日志。它确实收集了部分日志,这些日志仅来自其中一个容器。这是我的logstash配置文件的输入部分:

input {
  file {
    path => "/home/userXXX/hadoop-2.6.0/logs/userlogs/application_*/container_*/*"
  }

所以问题是,*的路径是否涵盖了所有容器文件夹,包括那些将在运行时创建的容器文件夹?

0 个答案:

没有答案