apache-kafka - Kafka自动提交间隔最佳实践

Question

选择 auto.commit.interval.ms 值时是否有最佳实践？

我读到here那:

In general, it is not recommended to keep this interval too small because it vastly increases the read/write rates in zookeeper and zookeeper gets slowed down because it's strongly consistent across its quorum.

什么太小了？ kafka >= 0.9.0 版本仍然有这个问题吗？

Answer 1

问题不在于什么是小，而是你能忍受什么？如果您可以忍受在消费者崩溃的情况下重新处理几分钟的消息，则可以将间隔设置为几分钟。因为这就是它的全部内容:消息将在从最后提交的偏移量(重新)开始后处理。