gpt4 book ai didi

elasticsearch - Elasticsearch + Logstash-接收事件时索引来自不同来源的数据

转载 作者:行者123 更新时间:2023-12-03 02:11:09 27 4
gpt4 key购买 nike

美好的一天,
在Elasticsearch中为某些数据建立索引时,我有点头疼,并对一种好的方法有一些疑问。
到目前为止,已经收到有关Kafka主题的事件,其中只有一部分数据应存储在文档中。收到事件后需要收集其余数据,并且可以从不同的API获得这些数据。为了减少工作量,Logstash似乎是一个好方法。
有没有一种方法可以配置Logstash,以便在收到事件时从不同的API和数据库启动数据收集,然后使用合并的日期组合文档,还是我坚持为索引编写耗时的自定义逻辑?我进行了一些搜索,但是找不到关于该问题的任何好答案。

最佳答案

在logstash中,您需要使用来自外部api的数据来查找/丰富您的消息,对吗?
您可以使用logstash的http_filter插件

关于elasticsearch - Elasticsearch + Logstash-接收事件时索引来自不同来源的数据,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/64644359/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com