elasticsearch - 重新设置 Logstash 状态

Question

我目前正在开发中并为 logstash 代理使用以下配置:

input {
  file {
    type => "access_log"

    # Wildcards work, here :)
    path => [ "/root/isaac/vuforia_logs/access_logs/gw_access_log.2014-02-19.00.log"]

    start_position => "beginning"
  }


} 

filter {
 if [type] == "access_log" {
  grok { 
    pattern  => "\[%{DATA:my_timestamp}\] %{IP:client} %{WORD:method} %{URIPATHPARAM:request} \[%{DATA:auth_data}\] \[%{DATA:another_timstamp}\] %{NUMBER:result_code} %{NUMBER:duration} %{NUMBER:bytes}"
  }
 }
}



output {
  stdout { debug => true }
  elasticsearch_http { 
        host => "192.168.79.128"
        }

第一次读取文件时，它会处理它并记录到 stdout 和 elasticsearch。问题是当我重新启动 logstash 时它没有做任何我认为是因为它保留了 logstash 上次停止的最后位置。我对重置 logstash 很感兴趣，这样它会从头开始重新处理文件。这是为了开发和测试目的，有没有办法重置/清理 logstash 状态？

谢谢

Answer 1

Logstash 将为输入文件记录一个 sincedb。默认路径是您的 $HOME 目录。您可以访问here了解更多信息。

如果要重置/清理它，可以删除 $HOME 中的所有 .sincedb_*。然后当你重新启动 logstash 时，它会从头开始读取。