kafkamanager(kafkamanager和kafka eagle哪个好用)

本篇文章给大家谈谈kafkamanager,以及kafkamanager和kafka eagle哪个好用对应的知识点,希望对各位有所帮助,不要忘了收藏本站喔。

本文目录一览:

kafka manager管理服务问题——积压假现象

关于kafka-manager管理kafka集群,使用后,出现了一件比较刺激的事情。积压假象,消费队列观察队列消费是持续积压,但服务正常。消费服务也正常处理,多维度查看消费服务后,确悔笑定消费者没蠢含有问题,但是对于管理的kafka队列并没有下降,而是在持续增加积压数据。大胆的对kafka-manager管理服带前笑务进行重启,再次观察,发现数据并为积压。但还是不敢掉以轻心,毕竟刚启动数据只是正在统计,持续观察后,发现数据确实未出现增加。

[img]

不要再苦没有合适的kafka管理平台,给你分享10款kafka管理工具

这10款工具如下:

AKHQ

Kowl

Kafdrop

UI for Apache Kafka

Lenses

CMAK

Confluent CC

Conduktor

LogiKM

kafka-console-ui

如空察果上面这个地址可以打开,可以直接去看介绍,下文也不再重复说明。

关于前8款的对比,可以看下面这张图片,图片也是于上面,我直接copy过来了(可能有好多同学打不开上面这个链接,就直接看这张图片了解了下吧)

关于这8款工具的介绍,人家说的很清晰了,这里就不再重复说明了,并且这些工具,大部分我也没用过,也没资格评价太多。

考虑到很多同学可能打开github太慢,我下面会把相关基本信息整理一下,供大家快速了解,方便选型。

概览

AKHQ (previously known as KafkaHQ)

开发语言:后端是java为主

Kowl - A Web UI for Apache Kafka

p.s. github上完整的动图这里上传失斗首茄败,就只放一个静态的截图了,如果可以打开github,建议打开下面的地址直接看吧。

但是这个并不是所有功能都是免费,有部分功能是商业版才有:

开发语言:后端是go为主

Kafdrop – Kafka Web UI

开发语言:后端以java为主

要求jdk11或更高版本

UI for Apache Kafka – Free Web UI for Apache Kafka

开发语言:后端以java为主

要求jdk13或更高版本

Lenses.io

Apache Kafka 和 Kubernetes 的实时应用程序和数据操作 #DataOps 门户。

CMAK (Cluster Manager for Apache Kafka, previously known as Kafka Manager)

这个想必很多同学都知道,原来的名字就是kafka manager。

开发语言:后端以scala为主

Confluent Inc.

Apache

Conduktor

一个商业版本的桌面客户端

官网找到一个这样的图片,凑合看吧:

LogiKM

滴滴开源的一站式Apache Kafka集群指标监控与运维管控平台。

也是分社区版和商业版的。

这个建议直接看github说明吧,都是中文,内容清晰,相关的资料也都有。

我也简单的了解了下,有个逻辑集群的概念,对于规模比较大的kafka集群管理还是挺好的,不过,这里比较高端的特性都是不开源的,必须商业版才能用。

开发语言:后端以java为主芹闹

kafka-console-ui(kafka可视化管理平台)

一款轻量级的kafka可视化管理平台,安装配置快捷、简单易用。界面风格有点类似rocketmq-console。

这款权当是“王婆卖瓜,自卖自夸”吧,一个小工具,如果刚接触kafka的同学或者是中小型集群,想找个简单易用的,可以考虑一下。

开发语言:后端以java和scala为主

参考链接:

Mac 使用 docker 搭建 kafka 集群 + Zookeeper + kafka-manager

这里我们用最简单的方式创建一个独立的Zookeeper节点,如果要考虑zookeeper的高可用,可以将其做成一个集群,友中最好是能有多台机器。

默认的,容器内配置文件在,/conf/zoo.cfg,数据和日志目录默认在/data 和 /datalog,需要的话可以将上述目录映射到宿主机的可靠文件目录下。

使用docker命令可快速在同一台机器搭建多个kafka,只需要改变brokerId和端口

中间两个参数的 192.168.0.102 改为 宿主机器 的IP地址,如果不这么设置,可能会导致在别的机器上访问不到 kafka。

或者可以通过 kafka-manager 创建

在kafka容器中的 opt/kafka_2.12-1.1.0/ 目录下输入

显示每个分区的Leader机器为broker0,在broker0和1上具有备份,Isr代表存活的备份机器中存活的。

当停掉纤备kafka1后,

再查看topic状态,输出结果:

kafka-manager 有图形化UI,可以方便的监控集群状态,调整队列配置

容器启动以后访问主机的9000端口,0.0.0:9000

首次进入需要添加一个集群标识,如下图所示

配置好以后,通过Zookeeper该管理节点可以读取到整毁告毁个Kafka集群的信息,并且我们可以通过JMX直接看到集群的健康状态

也可以看到主题的读写速度,偏移量等信息,如下图所示:

Brokers ,Partitions,Replicas 都能看到

以及 group:

原文地址: mac 使用 docker搭建 kafka集群 + Zookeeper + kafka-manager

关于kafkamanager和kafkamanager和kafka eagle哪个好用的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站。

标签列表