腾讯资深架构师给你讲解 kafka的基本原理,带你实战实践

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了腾讯资深架构师给你讲解 kafka的基本原理,带你实战实践相关的知识,希望对你有一定的参考价值。

前言

Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务等等,用scala语言编写,Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。

kafka入门与实践

第一章 kafka简介

第1章对Kafka的基本概念进行了简要介绍,方便大家对Kafka有一个大致的了解。
技术图片

第二章 Kafka安装配置

第2章详细介绍Kafka安装环境的配置及Kafka源码的编译,这一章为后续各章的Kafka原理讲解及基本操作进行准备。
技术图片

第三章 kafka核心组件

第3章对Kafka基本组件的实现原理、实现细节进行了分析。如果只想了解Kafka的相关应用,而不关注Kafka的实现原理,在阅读时可以直接跳过这一章。但我觉得,如果想真正掌握Kafka及其实现细节,这一章是值得花时间仔细阅读的。
技术图片

第四章 核心流程分析

第4章对Kafka核心流程进行分析,主要从Kafka启动流程到创建一一个主题、生产者发送消息、消费者消费消息的过程进行了简要介绍。这一章是Kafka 运行机制的缩影,如果跳过了第3章关于组件实现原理的讲解,那么建议一定要阅读这一章,因为通过阅读这一章可以更进一步地了 解Kafka运行时的主要角色及其职责,为后面的Kafka实战部分打下坚实基础。
技术图片

第五章 基本操作实战

第5章开始就进入了Kafka实战部分。这一章通过 Kafka自带脚本演示,详细介绍了Kafka基本应用的操作步骤,基本覆盖了Kafka 相关操作,因此请读者在阅读时要跟随本书所讲内容进行实战。
技术图片

限于平台篇幅限制,同时也为了大家更好的阅读,小编把Kafka相关的资料都整理好了,有感兴趣的程序员可以帮忙转发文章后,关注回复小编【学习】获取哦~

目录

技术图片
技术图片

以上是关于腾讯资深架构师给你讲解 kafka的基本原理,带你实战实践的主要内容,如果未能解决你的问题,请参考以下文章

腾讯资深架构师带你深入解析spring boot相关面试题 让你不在恐惧面试,轻松进大厂

玩转redis持久化,阿里架构师给你来一篇方案介绍

腾讯资深技术官23天手撸笔记,全新演绎“Kafka部署实战”,已开源下载

RPC实战与核心原理,京东首席架构师带你解决分布式通信难题

如何做好容器化管理?腾讯架构师一篇文章带你吃透 Docker 原理

Kafka原理篇:图解kafka架构原理