gpt4 book ai didi

apache-kafka - 了解卡夫卡检查点

转载 作者:行者123 更新时间:2023-12-04 10:16:54 25 4
gpt4 key购买 nike

我想了解 Kafka Stream Checkpointing 背后的想法。它只是消费者方面管理偏移信息吗?或者还有更多。任何解释细节的链接都会有所帮助。

最佳答案

Kafka Streams 中的 Checkpoint 用于存储 state store 的 changelog topic 的偏移量,因此当应用程序重新启动并发生状态恢复时,restore consumer 将尝试从存储在 checkpoint 中的这个偏移量继续消费如果偏移量仍然有效,则恢复文件,否则恢复过程将删除旧状态并通过从更改日志主题的开头开始消费来开始恢复。

我在 Kafka Streams 文档中找不到任何关于检查点的信息,it was added from 1.1.0 .

关于apache-kafka - 了解卡夫卡检查点,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/61027774/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com