kafka

Posted cyh2009

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了kafka相关的知识,希望对你有一定的参考价值。

kafka这个东西到底是怎么一回事,其实很简单,就是一个消息中间件,可以订阅消息,也可以发布消息

所谓订阅,就是消费

所谓发布,就是生产

在分布式系统中,如果消费方在处理一项任务中需要联系到生产方,那么在调用对方系统的时候,如果对方系统调用失败,或者对方系统崩溃,而我方消费者系统仍需要继续执行的时候,由于对方处理中存在大量的处理,

我方消费者如何知道对方处理的是成功还是失败呢?

因为如果对方成功的话,我方就可以顺序执行下去了

而如果对方失败的话,我方就需要进行任务回滚了

所以有必要,在生产者和消费者中间,增加一个消息中间件,

一边订阅生产者消息的同时,一边再向消费者发布订阅得来的消息,

 

重点,如果生产者和消费者先前已经约定好消息的格式,这样的话,等消费者接收到kafka发布的消息,就可以执行或回滚操作了

 

应用场景有很多,不一一举例了

以上是关于kafka的主要内容,如果未能解决你的问题,请参考以下文章

大数据技术之KafkaKafka APIKafka监控Flume对接KafkaKafka面试题

大数据技术之KafkaKafka APIKafka监控Flume对接KafkaKafka面试题

kafkaKafka Leader选举流程和选举策略

kafkakafka 时间轮 TimingWheel

kafkakafka 使用 案例

kafkakafka特性