处理测试环境硬盘爆满

Posted opama

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了处理测试环境硬盘爆满相关的知识,希望对你有一定的参考价值。

测试环境经常会收到这类告警

技术分享图片

第一步 登陆机器查看硬盘使用

执行df

技术分享图片

好吧,使用情况真不妙,根目录占用过大

第二步 确定哪个文件太大或者文件过多

进入爆满的目录,如这里是根目录

cd /
然后找下面哪个文件夹或者文件太大,有几种方式:

1.du
sudo du -h --max-depth=1 | sort -hr
越前面的目录/文件越大,可以找到最大的目录或文件,去看下有啥可以清除的
技术分享图片

2.find
sudo find . -type f -size +100M
找到占用较大的文件(这里是+100M即大于100M的文件,可以根据实际情况修改),如果是单个文件过大造成的磁盘满,效果较好

技术分享图片

第三步 执行清除

删除额外的文件,降低磁盘空间,81%->75%

技术分享图片

第四步 如果没有效

执行效果清除不明显,或者du的数值和df差别过大(即明明没有多少文件,磁盘怎么就满了),很大可能是文件被删除,但仍被进程占用,硬盘空间无法释放

执行

sudo lsof +L1|grep deleted
, 看下是否有大文件处于删除状态(deleted)但未被进程释放

技术分享图片

重启rsyslogd后,硬盘空间正常,75%->31%
技术分享图片









以上是关于处理测试环境硬盘爆满的主要内容,如果未能解决你的问题,请参考以下文章

docker 容器日志导致系统存储爆满,如何处理?

记录一次克隆硬盘的经历

记一次磁盘空间爆满导致的持久化抱错

物理机安装linux,根目录爆满,home目录还很大,不关机迁移空间到根目录

jedis连接池爆满导致的服务不可用

OutOfMemory排查