KafkaKafka Producer整体架构概述及源码分析

Posted 九师兄

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了KafkaKafka Producer整体架构概述及源码分析相关的知识,希望对你有一定的参考价值。

在这里插入图片描述

1.概述

转载并且补充:原文地址:https://blog.csdn.net/XU906722/article/details/104420045

本文基于Kafka 0.11 版本

2.整体架构

在这里插入图片描述

2.1 线程

整个 Kafka 客户端由两个线程协调运行,即Main线程和Sender线程。
在Main线程中由KafkaProducer创建消息,然后通过Interceptor、Serializer和Partitioner之后缓存到RecordAccumulator(消息累加器)中。
Sender线程 负责从RecordAccumulator中获取消息并发送到Kafka中。

<

以上是关于KafkaKafka Producer整体架构概述及源码分析的主要内容,如果未能解决你的问题,请参考以下文章

kafkaKafka 幂等 Producer

Kafkakafka方式消息不丢失的一些参数设置

Kafkakafka NetworkClient

大数据技术之KafkaKafka概述Kafka快速入门Kafka架构深入

大数据技术之KafkaKafka概述Kafka快速入门Kafka架构深入

大数据技术之KafkaKafka概述Kafka快速入门Kafka架构深入