kafka参数关于副本的一次线上调优

Posted bale_

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了kafka参数关于副本的一次线上调优相关的知识,希望对你有一定的参考价值。

线上kafka出现频繁的分区leader重新选举,spark程序中加的重试参数好像又没生效,导致流程异常,后来进行一些参数调优之后恢复正常。()内为默认值

zookeeper.session.timeout.ms=30s(6s)

replica.fetch.max.bytes=5M(1M)

replica.lag.time.max.ms=30s(10s)

min.insync.replicas=1

num.replica.fetchers=6

以上是关于kafka参数关于副本的一次线上调优的主要内容,如果未能解决你的问题,请参考以下文章

一次线上kafka消费问题排查

一次线上 JVM 调优实践,FullGC 40 次/天到 10 天一次的优化过程

一次线上JVM调优实践,FullGC40次/天到10天一次的优化过程

记一次G1垃圾回收线上调优的实践

记一次G1垃圾回收线上调优的实践

一次线上JVM调优实践,FullGC40次/天到10天一次的优化过程