记一次服务器inodes数报警的事件

Posted T

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了记一次服务器inodes数报警的事件相关的知识,希望对你有一定的参考价值。

1 # df -i

执行以上命令,发现/上的 inodes 占用率为81%,于是开始处理。

首先找出哪个目录底下文件数最多:

1 # cd /
2 # for i in $(ls);do echo ${i} && find ${i} | wc -l;done

我找出的目录是/var/spool/clientmqueue目录,文件数有200万左右。之

所有有这么多,是因为定时任务的原因。如果某个定时任务执行时有输出内容,

这些输出内容会以邮件的形式发往crontab的用户,慢慢的就占满了空间。

解决办法:在定时任务命令后重定向到空设备中去。

> /dev/null 2>&1

 

找到之后,就开始删除那200万文件。

1 # cd /var/spool/clientmqueue
2 
3 # ls | xargs rm -f

 

最终inodes占用率降为40%。

 

以上是关于记一次服务器inodes数报警的事件的主要内容,如果未能解决你的问题,请参考以下文章

记一次redis挂机导致的服务雪崩事故,不对,是故事~

记一次数据库“脑裂“问题的复盘

记一次k8s集群节点镜像存储容量报警问题

记一次线上事故

记一次线上事故

记一次OOM排查过程