kafka2.5.0架构硬件选择参考因素

Posted zhuwenjoyce

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了kafka2.5.0架构硬件选择参考因素相关的知识,希望对你有一定的参考价值。

Kafka架构在硬件选择方面,以重要性顺序考虑以下4点:

1) 磁盘(最重要)。影响最大的事生产者,读写速度。需参考多个分区、多个目录,如一个分区每天生产1TB数据,10天就是10GB,再乘以分区数量。

2)网络。生产者、消费者写入、读取速度

3)内存。影响消费者,因为生产者如果写不了内存可以写磁盘,而消费者永远都是读取内存是更快的。

4)CPU。 压缩数据,不是kafka首选考虑因素。

end.

以上是关于kafka2.5.0架构硬件选择参考因素的主要内容,如果未能解决你的问题,请参考以下文章

kafka2.5.0自定义数据序列化类

kafka2.5.0 主题Topic

kafka2.5.0基本命令

kafka2.5.0自定义分区器

kafka2.5.0详解核心配置文件server.properties

kafka2.5.0生产者与消费者配置详解