kafka学习之路

Posted 2022-12-12 momoyan

https://www.cnblogs.com/qingyunzong/p/9004509.html

目录

• 一、简介
  • 1.1　概述
  • 1.2　消息系统介绍
  • 1.3　点对点消息传递模式
  • 1.4　发布-订阅消息传递模式
• 二、Kafka的优点
  • 2.1　解耦
  • 2.2　冗余（副本）
  • 2.3　扩展性
  • 2.4　灵活性&峰值处理能力
  • 2.5　可恢复性
  • 2.6　顺序保证
  • 2.7　缓冲
  • 2.8　异步通信
• 三、常用Message Queue对比
  • 3.1　RabbitMQ
  • 3.2　Redis
  • 3.3　ZeroMQ
  • 3.4　ActiveMQ
  • 3.5　Kafka/Jafka
• 四、Kafka中的术语解释
  • 4.1　概述
  • 4.2　broker
  • 4.3　Topic
  • 4.3　Partition
  • 4.4　Producer
  • 4.5　Consumer
  • 4.6　Consumer Group
  • 4.7　Leader
  • 4.8　Follower

 

Kafka学习之路 （二）Kafka的架构

https://www.cnblogs.com/qingyunzong/p/9004593.html

目录

• 一、Kafka的架构
• 二、Topics和Partition
• 三、Producer消息路由
• 四、Consumer Group
• 五、Push vs. Pull
• 六、Kafka delivery guarantee

 

Kafka学习之路 （三）Kafka的高可用

https://www.cnblogs.com/qingyunzong/p/9004703.html

目录

• 一、高可用的由来
  • 1.1　为何需要Replication
  • 1.2　Leader Election
• 二、Kafka HA设计解析
  • 2.1　如何将所有Replica均匀分布到整个集群
  • 2.2　Data Replication（副本策略）
• 三、HA相关ZooKeeper结构
  • 3.1　admin
  • 3.2　broker
  • 3.3　controller
• 四、producer发布消息
  • 4.1　写入方式
  • 4.2　消息路由
  • 4.3　写入流程
• 五、broker保存消息
  • 5.1　存储方式
  • 5.2　存储策略
• 六、Topic的创建和删除
  • 6.1　创建topic
  • 6.2　删除topic
• 七、broker failover
• 八、controller failover