大并发内核优化参数

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大并发内核优化参数相关的知识,希望对你有一定的参考价值。

如何分析系统的性能问题:

从以下几个维度进行考虑

 当并发压力加大时,往往是吞吐量上不去,肯定是某一个方面出现了瓶颈,(比如CPU,内存(大量的swap),磁盘IO,网络IO,操作系统,应用)

  如果CPU比较高(user,sys,wa),user高,可以把系统的线程dump出来,观察系统正在做的逻辑,优化逻辑;sys高,则说明kernel耗费了大量的CPU时间,比如当前的线程的切换比较厉害等等;wa高一般是IO操作比较频繁,CPU频繁调度

        查看CPU,还需要观察系统load,一般不要超过系统的物理core数量。

  如果出现大量的swap,说明物理内存不足

  磁盘IO(文件系统cache)

  网络IO(包的数量,以及大小)

  应用本身,比如锁,还有连接池的大小设置,并发连接数限制(这种是资源利用率不高,但是tps上不去)

  操作系统(文件句柄,socket优化等)


附上操作系统优化的参数

/etc/sysctl.conf(也可以通过/proc):

net.ipv4.tcp_max_syn_backlog = 8192//每个端口的 连接请求排队数量,多余该值,连接请求被丢弃(客户端无法成功连接该服务器)

net.core.netdev_max_backlog = 5000

net.core.somaxconn = 32767

net.core.rmem_max = 16777216//read缓冲区最大长度(B)

net.core.wmem_max = 16777216//写缓冲区最大长度(B)

net.ipv4.tcp_keepalive_time = 1200//超过多少秒连接处于空闲状态,则进行探测

net.ipv4.tcp_fin_timeout = 30//关闭后,处于TIME_AWAIT转台,转到close状态可以重新利用该socket的时间(秒)

net.ipv4.tcp_rmem = 4096 262140 16777216//最小、默认、最大

net.ipv4.tcp_wmem = 4096 262140 16777216//最小、默认、最大

# net.ipv4.tcp_timestamps = 0

net.ipv4.tcp_synack_retries = 2

net.ipv4.tcp_syn_retries = 2

net.ipv4.tcp_mem = 94500000 915000000 927000000

net.ipv4.tcp_max_orphans = 3276800

net.ipv4.ip_local_port_range = 1024  65535//临时端口范围

net.ipv4.tcp_tw_reuse = 1//表示开启重用。允许将 TIME-WAIT sockets 重新用于新的 TCP 连接,默认为 0 ,表示关闭

net.ipv4.tcp_tw_recycle = 1//表示开启 TCP 连接中 TIME-WAIT sockets 的快速回收,默认为 0 ,表示关闭。

fs.file-max = 65535//文件最大句柄数量

net.ipv4.tcp_max_tw_buckets = 5000 
表示系统同时保持TIME_WAIT套接字的最大数量,如果超过这个数字,TIME_WAIT套接字将立刻被清除并打印警告信息。默认为 180000,改为5000。对于Apache、nginx等服务器,上几行的参数可以很好地减少TIME_WAIT套接字数量,但是对于Squid,效果却不大。此项参数可以控制TIME_WAIT套接字的最大数量,避免Squid服务器被大量的TIME_WAIT套接字拖死。 

 

/etc/security/limits.conf:

*    soft    nofile    65536

*    hard    nofile    65536

lsmpusr soft nproc  32000

lsmpusr hard nproc  32000

本文出自 “蔡超” 博客,转载请与作者联系!

以上是关于大并发内核优化参数的主要内容,如果未能解决你的问题,请参考以下文章

[记录]优化Linux 的内核参数来提高服务器并发处理能力

基于Nginx实现10万+并发,你应该做的Linux内核优化

Linux系统内核优化

linux下nginx服务应用总结--突破10万高并发的nginx性能优化经验(含内核参数优化

Nginx 实现 10w+ 并发之 Linux 内核优化

Nginx 实现 10w+ 并发之 Linux 内核优化