hadoop开启回收站配置

Posted 刘元涛

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop开启回收站配置相关的知识,希望对你有一定的参考价值。

开启回收站功能,可以将删除的文件在不超时的情况下,恢复原数据,起到防止误删除、备份等作用。

开启回收站功能参数说明

(1)默认值fs.trash.interval = 0,0表示禁用回收站;其他值表示设置文件的存活时间。

(2)默认值fs.trash.checkpoint.interval = 0,检查回收站的间隔时间。如果该值为0,则该值设置和fs.trash.interval的参数值相等。

(3)要求fs.trash.checkpoint.interval <= fs.trash.interval

启用回收站

修改core-site.xml,配置垃圾回收时间为30分钟。

回收站目录在HDFS集群中的路径:/user/{username}/.Trash/….

注意:通过网页上直接删除的文件也不会走回收站。

只有在命令行利用hadoop fs -rm命令删除的文件才会走回收站。

以上是关于hadoop开启回收站配置的主要内容,如果未能解决你的问题,请参考以下文章

Hadoop-生产调优手册

Hadoop-生产调优手册

HDFS的垃圾回收机制

[Hadoop]万字长文Hadoop相关优化和问题排查总结

建议收藏大数据技术之 Hadoop(生产调优手册)

大数据技术之Hadoop(生产调优手册)