mysql5.7.9+支持的新参数innodb_numa_interleave

Posted 2020-10-21

            大家都知道，在运行mysql服务的服务器上，linux系统的内存numa特性是强烈建议关闭的。因为这种特性很容易引起内存泄漏的情况：即发现物理内存还有剩余，但是系统已经开始使用swap内存。
            numa内存特性：比如一台机器是有2个处理器，有4个内存块。我们将1个处理器和两个内存块合起来，称为一个NUMA node，这样这个机器就会有两个NUMA node。在物理分布上，NUMA node的处理器和内存块的物理距离更小，因此访问也更快。比如这台机器会分左右两个处理器（cpu1, cpu2），在每个处理器两边放两个内存块(memory1.1, memory1.2, memory2.1,memory2.2)，这样NUMA node1的cpu1访问memory1.1和memory1.2就比访问memory2.1和memory2.2更快。所以使用NUMA的模式如果能尽量保证本node内的CPU只访问本node内的内存块，那这样的效率就是最高的。
            其实由于mysql数据库服务器一般只会部署mysql一种服务在运行，而不会部署若干应用在运行。所以一般是希望mysql是独占整个服务器的资源（剔除留给操作系统运行的资源）。所以根据这种业务特性，mysql服务器上是不建议开启numa内存特性。
            那如果关闭numa特性呢？

            1、BLOS层面：
                        由于不同系统之间各种BLOS类型的区别，设置各有不同。这里不再展开。

            2、操作系统层面：
                        可以直接在/etc/grub.conf的kernel行最后添加numa=off。

            3、MySQL层面：
                        直接修改启动脚本：
                        numactl --interleave=all mysqld --defaults-file=/etc/my.cnf &

            4、设置innodb_numa_interleave参数：
                        MySQL5.7.9版本+，新增了参数innodb_numa_interleave。根据官方文档的描述：当设置innodb_numa_interleave=1的时候，对于mysqld进程的numa内存分配策略设置为MPOL_INTERLEAVE，而一旦Innodb buffer pool分配完毕，则策略重新设置回MPOL_DEFAULT。**当然这个参数是否生效，必须建立在mysql是在支持numa特性的linux系统上编译的基础上。**
                        在MySQL5.7.17版本+， CMake编译软件新增了WITH_NUMA参数，可以在支持numa特性的linux系统上编译mysql。

                        注：innodb_numa_interleave目前在mysql5.7.17的二进制包是不支持的，详细的bug信息：https://bugs.mysql.com/bug.php?id=80288 。如果需要规避这种情况，建议下载源码包，直接在系统上进行mysql编译。