使用jemalloc优化MysqlPHP内存占用

Posted tlanyan

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使用jemalloc优化MysqlPHP内存占用相关的知识,希望对你有一定的参考价值。

原文链接:https://tlanyan.me/use-jemall...

本站托管在自购的CN2 GIA VPS服务器上,内存只有2G,偶尔会出现内存紧张而导致系统把Redis、mysql等内存大户kill掉的情况。增加swap 可以解决这个问题,但swap性能比内存差太多,因此想到使用jemalloc优化内存占用。

jemalloc介绍

jemalloc是facebook推出的内存分配器,目前在firefox、facebook服务器、android 5.0 等服务中大量使用。 jemalloc最大的优势是其强大的多核/多线程分配能力,在内存足够大时, CPU的核心数量越多,程序线程数越多,jemalloc的分配速度越快。根据测试数据,在高并发时性能优于Google推出的tcmalloc和Glibc的ptmalloc。

除了性能高,jemalloc还降低了内存碎片化,能更好的利用内存。

使用jemalloc优化Mysql、php内存占用

Redis默认使用了jemalloc,redis-cli info memory有如下输出:

... mem_not_counted_for_evict:0 mem_replication_backlog:0 mem_clients_slaves:0 mem_clients_normal:0 mem_aof_buffer:0 mem_allocator:jemalloc-5.1.0 active_defrag_running:0 lazyfree_pending_objects:0

Mariadb/mysql、PHP等则默认使用系统自带的ptmalloc,因此可以替换成jemalloc获得更好的内存使用率。

首先安装jemalloc:

CentOS系统 yum install -y jemalloc # Ubuntu/Debian系统 apt install -y libjemalloc2

安装完成后,CentOS系统在/usr/bin目录下会有jemalloc.sh文件。可以通过jemalloc.sh 后续命令执行命令,例如jemalloc.sh node app.js,从而用上jemalloc分配和管理内存。

对于Ubuntu/Debian系统,或者CentOS系统上以systemctl启动的服务,需要通过如下方式用上jemalloc:

  1. 设置LD_PRELOAD环境变量:export LD_PRELOAD=libjemalloc.so路径:$LD_PRELOAD,然后再运行命令/使用systemctl重启服务。其中CentOS系统下libjemalloc.so的路径是/usr/lib64/libjemalloc.so.2,Ubuntu/Debian的路径是/usr/lib/x86_64-linux-gnu/libjemalloc.so.2。聪明如你,应该能想到把export语句放置到.bashrc文件中,以便后续都生效;
  2. 设置系统全局使用,方法是新建/etc/ld.so.preload文件,把libjemalloc.so路径写入文件,然后重启Mariadb、PHP-FPM等服务。

本站采取第二种方式,配置好/etc/ld.so.preload后重启Mariadb、PHP-FPM,可通过下面的命令查看是否用上了jemalloc:

  1. lsof -Pn -p $(pidof mariadbd) | grep jemalloc,配置正确的话会有jemalloc.so的输出;
  2. cat /proc/$(pidof mariadbd)/smaps | grep jemalloc,和上述命令有类似的输出。

查看PHP-FPM的方式同理。

总结

本文简要介绍了使用jemalloc优化Mysql、PHP内存占用的方法和操作步骤,并给出查看进程是否用上jemalloc的命令,达到优化内存占用的目的。

通过上述配置,内存优化能有多少呢?说实话对于小内存服务器改进并不大,只是聊胜于无罢了。

参考

  1. Enabling jemalloc on Percona Server for MySQL 5.7 and 8.0 Series
  2. How to use Node.js with Jemalloc?
  3. CentOS 7系统增加swap
  4. 几个查看Redis内存信息的命令

以上是关于使用jemalloc优化MysqlPHP内存占用的主要内容,如果未能解决你的问题,请参考以下文章

linux 下怎么优化mysql占用内存?

LNMP 安装内存优化Jemalloc TCmalloc 到底要不要安装

LNMP 安装内存优化Jemalloc TCmalloc 到底要不要安装

mysql-5.7.21 二进制安装 | Jemalloc内存优化 | 备份恢复|修改密码

Redis内存碎片优化参数

jvm之年轻代(新生代)老年代永久代以及GC原理详解GC优化