kafka 日志结构

Posted sunshine-long

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了kafka 日志结构相关的知识,希望对你有一定的参考价值。

1.kafka日志结构

直接举例子:

例如kafka有个名字叫 haha 的topic,那么kafka日志下面有kafka-0,kafka-1,kafka-2...,kafka-n,具体多少个,创建分区的时候有几个分区,n就是几。

[[email protected] kafka]# ls haha-
haha-0/ haha-1/ haha-2/

每个目录下面有三个日志文件,xxx.log是消息集文件, xxx.index 偏移量索引文件 ,xxx.timeindex 时间戳索引文件

[[email protected] kafka]# ls haha-1
00000000000000000000.index  00000000000000000000.log  00000000000000000000.timeindex

 

以上是关于kafka 日志结构的主要内容,如果未能解决你的问题,请参考以下文章

sh Logstash配置结构“syslog {docker {kafka | zk | go | x} | system}”日志

kafka存储结构以及Log清理机制

解开Kafka神秘的面纱

如何去掉控制台上输出的这些日志

argparse 代码片段只打印部分日志

常用python日期日志获取内容循环的代码片段