Logstash自定义日期日志格式匹配

时间:2014-09-25 09:33:00

标签: logstash logstash-grok

我有这个日志打印出如下所示的日期格式:

=          Build Stamp: 10:45:33 On Apr  4 2014           =

所以我在grok调试器上运行了过滤器,但仍然对如何删除单词 On

一无所知
grok {
patterns_dir => "./patterns"
match => { "message" => "%{F_TIMESTAMP:timestamp}" }
}

date {
match => [ "timestamp" , "HH:mm:ss MMM  d yyyy" , "HH:mm:ss MMM  dd yyyy" ]
locale => "en"
}

模式文件,

F_TIMESTAMP %{TIME} \On %{MONTH} +%{MONTHDAY} %{YEAR}

我当前的时间戳输出是

10:45:33 2014年4月4日在grok调试器上。

然后我如何使其与logstash @timestamp兼容/匹配?

1 个答案:

答案 0 :(得分:7)

您可以提取日期时间的每个部分,并在没有On关键字的情况下合并到另一个字段中。

您可以实现以下目标:

filter {
    grok {         
        match => { "message" => "%{F_TIMESTAMP}" }
    }
    mutate {
        add_field => { 
            "timestamp" => "%{time} %{month} %{monthday} %{year}"
        }
    }
    date {
        match => [ "timestamp" , "HH:mm:ss MMM d yyyy" , "HH:mm:ss MMM dd yyyy" ]
        locale => "en"
    }
    mutate {
        remove_field => [ "time" ,"month","monthday","year","timestamp"]
    }
}

F_TIMESTAMP %{TIME:time}\s*On\s*%{MONTH:month}\s*%{MONTHDAY:monthday}\s*%{YEAR:year}

它对我来说很好。