elasticsearch - 在tarfile上使用Logstash创建Elasticsearch管道

Question

我会定期收到包含要加载到Elasticsearch中的不同类型日志的压缩后的tarfile。 Logstash是否适合此用例？我似乎遇到的问题是，即使我可以提取tarfile内容，Logstash仍要求我指定绝对文件路径，而我要加载的每个tarfile的文件路径都会有所不同。

Answer 1

Logstash的文件输入插件通常用于“ Activity ”日志文件，以实时读取和索引数据。
如果要处理的日志文件完整，则完全不需要使用文件输入插件，只需使用stdin input plugin并将文件的内容传递给Logstash进程就足够了。