Kafka：那我走？这个新一代消息中间件，彻底火了！

Posted 2021-09-30 朱小厮

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了Kafka：那我走？这个新一代消息中间件，彻底火了！相关的知识，希望对你有一定的参考价值。

在 SOA 架构盛行的今天，无论大数据工程师还是开发工程师，利用消息中间件实现可靠的消息传输是一门必修课。

消息队列中间件的使用并不复杂，但消息队列的选型一直是个难点。比如：

不同业务场景下该如何选型消息队列？
流消息系统和队列消息系统的 producer 有何区别？
Kafka、RocketMQ、RabbitMQ 各自的优劣在哪？

在实际场景中，性能强大的 Kafka 支持排序保证，非常适合提取消息；而RocketMQ、RabbitMQ 拥有完善的队列特性，可以弥补 Kafka 的不足。

很多公司经常会在 Kafka 和 RabbitMQ 或 RocketMQ 之间做选择，这是因为在实时流式架构中，消息用例可被分为两类：队列和流。两者都不能舍弃，系统复杂度自然大大提高。

我的经验是，消息中间件的兼容之道，最关键一环就是消息队列选型。

除了老牌消息系统，新一代云原生消息系统 Apache Pulsar 支持流处理，同时它的共享订阅模式能将 topic 用作队列，向同一 topic 内的 consumer 提供多个虚拟队列并支持延迟发送消息。

冉冉升起的新星 Pulsar 支持三种订阅类型，很大程度上解决了现有开源消息系统的核心痛点：

排他性。只能有一个 Consumer，接收一个 Topic 所有的消息
共享性。可以同时存在多个 Consumer，每个 Consumer 处理 topic 中一部消息
Failover 特性。同一时刻只有一个有效的Consumer，其余的 Consumer 作为备用节点，在 Master Consumer 不可用后进行替代

移动互联网下半场，高并发、高吞吐已经不再是业务的首要痛点，代表未来的云原生消息系统 Pulsar 不仅能上阵实战，更适合抢先学习和掌握。

这里，我向你推荐由 Apache Pulsar 和 Apache BookKeeper PMC 成员、Committer 翟佳老师打造并担任主讲的国内首套Pulsar 课程《Apache Pulsar - 万亿级云原生的分布式消息平台》在线专栏课。

原价 ¥499，限时 ¥0.99 立刻学习！

长按扫码????，锁定 ¥0.99 名额

仅前 50 人有效，先到先得！

不夸张地说，翟佳老师是国内最懂 Pulsar 的人之一。跟着他学习 Pulsar 的架构和应用实践，有问题就在直播间和群里随时提问，几乎没有什么好顾虑的。况且，前转转公司大数据资深架构师、Hadoop平台负责人李希沅老师也会加入授课，解答你关于其他消息队列的核心问题。

国内首套 Pulsar 在线专栏课原价499，现在花0.99元，不到一次共享单车骑行就能马上学习，绝对相当划算。12 节名师精心打磨的大数据架构师必备技术知识精品课程，6月7 - 6月9日，3天速成，晚20:00-22:00点，助你赶超下一个行业风口。

重要提醒：一次报名，支持不限次数、不限日期的永久回看。同时课程期间还有惊喜大奖等你免费拿，小米体脂称、九阳早餐机、360智能摄像头等百元大礼全部包邮送，活动真实有效！

购课福利

12节干货实战课，带你快速掌握：

1、消息系统的架构选型；

2、深度掌握新一代万亿级消息系统 Pulsar 的架构设计；

3、搞定新一代万亿级消息系统 Pulsar 的核心特性；

4、掌握 Apache BookKeeper 的核心设计；

5、掌握大数据最新技术一手行业干货趋势、动态。

01

我为什么推荐这门课程给你

从 0 到 1 层层深入 Pulsar 架构核心

Pulsar 通过特别的设计和抽象，统一地支持 Streaming 和 Queueing 两种消息消费模式，保持了 Streaming 模式的高性能和 Queueing 模式的灵活性。Pulsar 在保证大数据消息系统的性能和吞吐量的同时，提供了更多企业级的 Feature，包括方便的运维和扩展，灵活的消息模型，多语言API，多租户，异地多备，和数据的强持久性一致性等等，解决了现有开源消息系统的很多不足之处。