使用logstash的csv文件输入处理在2/3天后停止工作

时间:2015-08-27 04:06:33

标签: elasticsearch logstash

我正在使用logstash-1.5.1来处理csv文件并上传到elasticsearch-1.5.1。这个过程应该每天都会发生。所以我把我的logstash和弹性搜索引擎放了一次然后离开它希望csv文件处理应该每天进行并上传到elasticsearch。每天都有一个新的csv文件从互联网上下载并存储在logstash读取的本地文件夹中。但令人惊讶的是,logstash在2/3天后停止处理csv文件。我不知道原因请帮助我。 logstash输入文件配置如下。

input { 

    file {
        type => "csv"
        path => "D:/Tools/logstash-1.5.1/data/**/*"
        start_position => beginning
        sincedb_path => "D:/Tools/logstash-1.5.1/sincedb/.sincedb"
    }

}


filter {
    grok {
        match => { "message" => "%{COMBINEDAPACHELOG}" }
      }

    }


output {
  elasticsearch { 
    host => "localhost" 
    cluster => "Test"
    node_name => "data"
    index => "client"
    template => "D:/Tools/logstash-1.5.1/lib/elasticsearch-template.json"
    template_overwrite => true

  }

}    

0 个答案:

没有答案