kafka常用命令(cdh5.10.0+kafka)

Posted lenmom

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了kafka常用命令(cdh5.10.0+kafka)相关的知识,希望对你有一定的参考价值。

参考资料:http://kafka.apache.org/quickstart

进入kafka安装目录(CDH安装路径为:/opt/cloudera/parcels/KAFKA):
进入bin目录:

  1. cd /opt/cloudera/parcels/CDH-5.10.0-1.cdh5.10.0.p0.41/bin  


创建topic,一个备份,6个分区

  1. kafka-topics --create --zookeeper personas1:2181 --replication-factor 1 --partitions 6 --topic TP_LABEL  

查看所有topic

  1. kafka-topics --list --zookeeper personas1:2181  

增加分区

  1. kafka-topics --zookeeper personas1:2181 --alter --topic TP_LABEL --partitions 8  

消费者

 

 
  1. kafka-console-consumer --zookeeper personas1:2181,personas2:2181,personas4:2181 --topic TP_LABEL  

删除kafka topic(1、删除topic,2、删除zk注册信息,3、删除源数据)

 

 
  1. kafka-topics --delete --zookeeper personas1:2181 --topic TP_LABEL  

进入CDH bin目录

 

 

  1. cd /opt/cloudera/parcels/CDH-5.10.0-1.cdh5.10.0.p0.41/bin  
  2. zookeeper-client  
  3. rmr /brokers/topics/TP_LABEL  

删除源数据,删除分区源数据(如果只有一个topic,直接把data删掉)

 

 
  1. cd /var/local/kafka/data  
  2. rm -rf TP_LABEL-*  

彻底清除zk中的注册信息,把kafka停掉,只保留箭头所指的配置,把其他kafka的信息全部删除

技术分享图片



以上是关于kafka常用命令(cdh5.10.0+kafka)的主要内容,如果未能解决你的问题,请参考以下文章

kafka常用命令

Kafka常用命令(v3.1.0)

kafka之常用命令

kafka常用的shell命令

kafka常用命令

Kafka常用命令行总结