linux下删除大量小文件

Posted FuZZ

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了linux下删除大量小文件相关的知识,希望对你有一定的参考价值。

当目录下文件太多时,用rm删除文件会报错:-bash: /bin/rm: Argument list too long提示文件数目太多。解决的办法是使用如下命令:ls | xargs -n 10 rm -fr ls输出所有的文件名(用空格分割) xargs就是将ls的输出,每...
当目录下文件太多时,用rm删除文件会报错:
-bash: /bin/rm: Argument list too long
提示文件数目太多。
解决的办法是使用如下命令:
ls | xargs -n 10 rm -fr ls
输出所有的文件名(用空格分割) xargs就是将ls的输出,每10个为一组(以空格为分隔符),作为rm -rf的参数也就是说将所有文件名10个为一组,由rm -rf删除
或者使用rsync的同步命令
rsync --delete-before -a -H  --stats test/ cache-bak/
test是空目录,cache-bak是要清空的目录
删除大文件时,可以使用 >清空

以上是关于linux下删除大量小文件的主要内容,如果未能解决你的问题,请参考以下文章

Linux 快速删除大量小文件方法

Hadoop HDFS处理大量的小文件

Hive如何处理大量小文件

Linux不能“粘贴”。不能删除大文件。

删除目录下大量小文件和清空大文件

删除目录下大量小文件和清空大文件