gpt4 book ai didi

elasticsearch - 如果logstash将数据发送到elasticsearch的速度快于索引速度,那会发生什么?

转载 作者:行者123 更新时间:2023-12-03 01:53:58 26 4
gpt4 key购买 nike

所以我有多个主机,每个主机上都安装了logstash。所有这些主机上的Logstash从主机生成的日志文件中读取数据,并将数据发送到我的单个AWS Elasticsearch集群。

现在考虑一个场景,其中每个主机同时生成大量日志。由于logstash安装在每个主机上,并且仅将数据转发到es群集,因此我假设即使我的Elasticsearch群集无法为其编制索引,我的主机也不会受到影响。在这种情况下日志只是丢失了吗?

我的主机会受到任何影响吗?

最佳答案

简而言之,您可能会丢失主机上的一些日志,这就是为什么使用诸如kafka之类的消息传递解决方案的原因https://www.elastic.co/guide/en/logstash/current/deploying-and-scaling.html#deploying-message-queueing

关于elasticsearch - 如果logstash将数据发送到elasticsearch的速度快于索引速度,那会发生什么?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38052622/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com