gpt4 book ai didi

apache-kafka - 在kafka中的复制分区下修复

转载 作者:行者123 更新时间:2023-12-04 04:13:17 24 4
gpt4 key购买 nike

在生产环境中,我们经常看到分区在使用主题消息时复制不足。我们正在使用Kafka 0.11。从文档中了解的是

配置参数replica.lag.max.messages已删除。在确定哪些副本同步时,分区负责人将不再考虑滞后消息的数量。

现在,配置参数replica.lag.time.max.ms不仅指自上次从副本获取请求以来耗时,而且还指自上次捕获副本以来所耗时。仍在从领导者获取消息但未 catch replica.lag.time.max.ms中最新消息的副本将被视为不同步。

我们如何解决这个问题?副本不同步的不同原因是什么?在我们的方案中,我们所有的Kafka代理都位于 Blade 服务器的单个RACK中,并且都使用具有10GBPS以太网(Simplex)的同一网络。由于网络的原因,我没有看到副本不同步的任何原因。

最佳答案

我们面临着同样的问题:

解决方案是:

  • 重新启动Zookeeper领导者。
  • 重新启动未复制某些分区的代理\代理。

  • 没有数据丢失。

    问题是由于ZK的状态错误,因此ZK上存在一个 Unresolved 问题,不记得数字了。

    关于apache-kafka - 在kafka中的复制分区下修复,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/51491152/

    24 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com