apache-kafka - 生产中的Kafka UI监控工具

Question

需要检查用于监控生产中的Kafka的工具。
此外，该工具不需要许可证或重型硬件。
我特别需要一个工具来评估主题，主题健康状况方面的消费者补偿。

Answer 1

镜片
Lenses（来自Landoop）通过用户界面，流SQL引擎和群集监视功能增强了Kafka。它可以更快地监视Kafka数据管道。

他们提供了一个免费的多合一docker（Lenses Box），该服务可以为单个代理提供最多2500万条消息。请注意，建议在开发环境中使用。

Cloudera SMM
Streams Messaging Manager是用于监视和管理运行Cloudera或Hortonworks kafka的群集的解决方案。它还具有复制功能。

汇合
另一个选项是Confluent Platform，它是用于生产环境的Kafka发行版。它还包括Control Centre，这是Apache Kafka的管理系统，可从用户界面进行群集监视和管理。

Yahoo CMAK（Apache Kafka的集群管理器，以前称为Kafka Manager）
Kafka Manager or CMAK是用于监视Kafka的工具，与上述工具相比，该工具提供的功能较少。

KafDrop
KafDrop是用于监视Apache Kafka集群的UI。该工具显示诸如代理，主题，分区之类的信息，甚至可以让您查看消息。它是一个运行在Spring Boot上的轻量级应用程序，只需很少的配置。

领英Burrow
Burrow是Apache Kafka的监视伴侣，无需指定阈值即可将消费者延迟检查作为一项服务提供。它监视所有消费者的承诺抵销，并根据需要计算这些消费者的状态。提供HTTP端点以按需请求状态，并提供其他Kafka群集信息。还有一些可配置的通知程序，可以通过电子邮件或HTTP调用向其他服务发送状态。

卡夫卡工具
Kafka Tool是用于管理和使用Apache Kafka集群的GUI应用程序。它提供了一种直观的UI，可让用户快速查看Kafka集群中的对象以及存储在集群主题中的消息。它包含面向开发人员和管理员的功能。



如果您负担不起许可证，则可以选择Yahoo Kafka Manager，LinkedIn Burrow或KafDrop。 Confluent和Landoop的产品是目前最好的产品，但不幸的是，它们需要许可。

有关更多详细信息，请参阅我的博客文章Overview of UI Monitoring tools for Apache Kafka Clusters。