kafka 删除topic时的隐患

Posted 2021-01-23 nhz-m

生产上kafka集群长时间使用会导致topic容器下已被消费的消息过多，进而导致在重新选主时切换时间长的问题。

追根到底来讲切换Leader时间都花费在zookeeper文件同步上，但是kafka恰恰没有清理已被消费消息的机制，

故导致死尸消息每次在节点重启或者切主都会时间很常，而zookeeper提供了java API清理消息的方法 ，

并且 需要配置delete.topic.enable=true，真正删除而非标记删除的“假删除”，在删除topic后需要重启下kafka集群，

否则感觉是出现topic没有被创建消息发来没有容器存放导致集群消息无法被消费，这里有待证实真是原因。