Kafka可视化工具之Kafka Tool

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Kafka可视化工具之Kafka Tool相关的知识,希望对你有一定的参考价值。


 

Kafka Tool是一个用于管理和使用Apache Kafka®集群的GUI应用程序。 Kafka Tool提供了一个较为直观的UI可让用户快速查看Kafka集群中的对象以及存储在topic中的消息,提供了一些专门面向开发人员和管理员的功能,主要特性包括:

  • 快速查看所有Kafka集群信息,包括其brokers, topics and consumers
  • 查看分区中的消息内容并支持添加新消息
  • 查看消费者偏移量,支持查看Apache Storm Kafka Spout消费者偏移量
  • 以pretty-printed 格式显示JSON和XML消息
  • 添加和删除topic以及其他管理功能
  • 将单个消息从指定分区保存到本地硬盘驱动器
  • 支持用户编写自己的插件以查看自定义数据格式
  • 支持在Windows,Linux和Mac OS上运行

Kafka工具仅供个人使用免费。 未经购买许可证,不得将其用于任何非个人用途,包括商业,教育和非营利性工作。 在下载Kafka Tool后的30天内,出于评估目的非个人是允许使用的,在此之后,用户必须购买有效的许可证或删除该软件。

Kafka可视化工具之Kafka

 

 

[配置]

第一次打开软件时Kafka Tool会以弹窗的形式提示进行Kafka Cluster配置,需要输入Zookeeper或者Broker地址以找到相应集群。

当然除了基本属性设置外还支持安全性设置、高级设置及JAAS设置等

Kafka可视化工具之Kafka

 

 将公司Kafka集群的Cluster name, Kafka Cluster Version, Zookeeper Host等配置信息按照要求填写到相关设置项中.

Kafka可视化工具之Kafka

 

 

[使用]

Kafka Tool提供了集群Brokers,Topics,Consumers信息预览功能,查看指定Topic下消息时支持关键词过滤等。

Kafka可视化工具之Kafka

 

 

Kafka可视化工具之Kafka

 

 

Kafka可视化工具之Kafka

 

 

选中Topic,进入topic设置详情页,从页面中可以设置从Oldest还是Newest位置读取消息,同时可以设置读取数据的格式(String或者ByteArray)。由于测试Topic中数据是JSON格式,演示中将key和value都设置为String格式,设置完成后如果update没有变为灰色需要手动点击update更新配置。

 

分区管理,新增/删除

在 ”topic分区管理“中,点击 ”+“ 按钮,设置 ”topic“ 信息(名字,分区数,副本数),即可创建topic。

Kafka可视化工具之Kafka

 

 

有创建当然也会有删除啦,在topic分区管理中,选择需要删除的分区,点击 ”ד 按钮,弹出来的提示框中选择是,即可删除topic。

删除操作一定要慎重!请仔细确认!!!
删除操作一定要慎重!请仔细确认!!!
删除操作一定要慎重!请仔细确认!!!

Kafka可视化工具之Kafka

 

 

 

使用Kafka Tool查看和管理Consumer

界面左侧点击Consumers可以看到该集群的所有消费者组,在下面列出来的消费者组中,随便点击一个,右侧会出现包含Properties和Offsets选项的界面。。

Properties包含如下内容:消费者组(组名)Id,消费者类型,偏移量存储位置。

Kafka可视化工具之Kafka

Offsets包含如下信息:刷新、打印、编辑功能,可以获取到消费者组消费的topic信息,分区偏移量信息,获取消费端的偏移量,积压的偏移量,以及偏移量最后提交时间等。

Kafka可视化工具之Kafka

当然这里也可以进行编辑,选择要进行编辑的消费者组,双击编辑按钮, 选择设置偏移量方式(从起始位置消费,从截止位置消费,或者从指定的偏移量开始消费)
,点击update完成设置。

Kafka可视化工具之Kafka

Kafka可视化工具之Kafka

 



以上是关于Kafka可视化工具之Kafka Tool的主要内容,如果未能解决你的问题,请参考以下文章

KAFKA (2.12-2.2.1)常用命令和kafka tool 工具使用

kafka 可视化工具Kafka Eagle

kafka可视化工具安装及简单使用

kafka之Eagle 监控

kafka可视化web管理工具-KafkaMmap

kafka图形界面管理工具安装