Linux 内核参数Overcommit_memory(最近生产中Airflow和Greenplum有被这个参数坑到......)

Posted 2020-12-13 wellDoneGaben

1. overcommit_memory是什么？

  overcommit_memory是一个内核对内存分配的一种策略。 具体可见/proc/sys/vm/overcommit_memory下的值

2. overcommit_memory有什么作用？

 overcommit_memory取值又三种分别为0， 1， 2

overcommit_memory=0， 表示内核将检查是否有足够的可用内存供应用进程使用；如果有足够的可用内存，内存申请允许；否则，内存申请失败，并把错误返回给应用进程。
overcommit_memory=1， 表示内核允许分配所有的物理内存，而不管当前的内存状态如何。
overcommit_memory=2， 表示内核允许分配超过所有物理内存和交换空间总和的内存

3. overcommit_ratio是什么？

当overcommit_memory=2的时候，它一般是代表的是系统中总的内存的百分比

4. 虚拟内存

CommitLimit = SwapTotal + MemTotal * overcommit_ratio

总的虚拟内存 = 总的交换分区 + 总的物理内存 * overcommit_ratio

这些信息可以到cat /proc/meminfo中看到， 可以通过上述的计算公式可以计算就可以获得系统的CommitLimit的值

5. Committed_AS:是什么？

Committed_AS代表了系统已经用了的内存情况

6. overcommit_memory的系统默认值是0， overcommit_ratio的默认值是50。可以实际中会遇到相同配置的电脑，相同的程序一个可以申请到内存，一个不可一申请到。这时候可以看看overcommit_memory的值是否被修改了。

生产踩坑: Airflow新版的一个bug需要将overcommit_memory调整为1, 而Greenplum修改pg_hba.cfg文件后重启需要overcommit_memory为2。