Kafka 消息的消费原理

Posted newlangwen

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Kafka 消息的消费原理相关的知识,希望对你有一定的参考价值。

https://www.cnblogs.com/huxi2b/p/6061110.html

1.老版本的kafka的offset是维护在zk上的,新版本的kafka把consumer的offset维护保存在kafka的内部topic上

Math.abs(groupID.hashCode()) % numPartitions
int abs = Math.abs("group-a".hashCode() % 50);

  bin/kafka-simple-consumer-shell.sh --topic __consumer_offsets --partition 47 --broker-list localhost:9092 --formatter "kafka.coordinator.group.GroupMetadataManager$OffsetsMessageFormatter"

以上是关于Kafka 消息的消费原理的主要内容,如果未能解决你的问题,请参考以下文章

消息队列-kafka消费者原理

Kafka消息的偏移量和顺序消费原理

Kafka 消息的消费原理

SpringCloud系列十一:SpringCloudStream(SpringCloudStream 简介创建消息生产者创建消息消费者自定义消息通道分组与持久化设置 RoutingKey)(代码片段

kafka消息通信原理学习

kafka系列八exactly once去重原理及场景