gpt4 book ai didi

apache-kafka - 如何在 Active - Active Kafka 设置中设置消费者

转载 作者:行者123 更新时间:2023-12-04 09:16:42 26 4
gpt4 key购买 nike

我们正在使用 https://strimzi.io/blog/2020/03/30/introducing-mirrormaker2/ 中指定的使用 Mirror Maker 2.0 进行主题重命名的 Active Active Kafka 集群设置.我相信诸如 us-email 之类的主题设置如下:
直流1

  • 我们的邮箱
  • us-email-dc2(dc2 的镜像)

  • 直流2
  • 我们的邮箱
  • us-email-dc1(dc1 的镜像)

  • 生产者可以发布到他们本地的 DC,两个集群都将包含两个 DC 的数据。到现在为止还挺好。
    消费者应用程序将订阅通配符主题 (us-email-*) 以读取两个 DC 的数据。如果是这种情况,我是否设置了一个消费者来从他们各自的 DC 中读取数据?在这种情况下,由于镜像,将会为到达消息读取重复的消息。还是建议一次只将一个消费者组指向一个 DC 以防止重复?如果是,如果单个 DC 发生故障,故障转移将如何发生?

    最佳答案

    Does consumers in both data centers have to point to single DC


    消费者不能从多个引导服务器列表中读取,所以是的

    there is manual failover?


    不清楚你说的手动是什么意思。
  • 如果镜像或目标代理失败,则消费者将停止读取任何内容
  • 如果源关闭,则镜像停止,返回到 (1)

  • consumers in both DC's will get replicated messages as well


    镜像并不能保证一次交付

    关于apache-kafka - 如何在 Active - Active Kafka 设置中设置消费者,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/63186568/

    26 4 0
    Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
    广告合作:1813099741@qq.com 6ren.com