hadoop错误org.apache.hadoop.util.DiskChecker$DiskErrorException Could not find any valid local directo

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop错误org.apache.hadoop.util.DiskChecker$DiskErrorException Could not find any valid local directo相关的知识,希望对你有一定的参考价值。

错误:

    org.apache.hadoop.util.DiskChecker$DiskErrorException: Could not find any valid local directory for

原因:

    两种可能,hadoop.tmp.dir或者data目录存储空间不足

解决办法:

    看了一下我的dfs状态,data使用率不到40%,所以推测是hadoop.tmp.dir空间不足,导致无法创建Jog临时文件。查看core-site.xml发现没有配置hadoop.tmp.dir,因此使用的是默认的/tmp目录,在这目录一旦服务器重启数据就会丢失,因此需要修改。添加:

    <property>

        <name>hadoop.tmp.dir</name>

        <value>/data/tmp</value>

    </property>

    然后重新格式化:hadoop namenode –format,再重启

 

如果,您认为阅读这篇博客让您有些收获,不妨点击一下右下角的【推荐】。
如果,您希望更容易地发现我的新博客,不妨点击一下左下角的【关注我】。
如果,您对我的博客所讲述的内容有兴趣,请继续关注我的后续博客,我是【刘超★ljc】。

本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。

以上是关于hadoop错误org.apache.hadoop.util.DiskChecker$DiskErrorException Could not find any valid local directo的主要内容,如果未能解决你的问题,请参考以下文章

错误:org.apache.hadoop.hbase.MasterNotRunningException:重试 7 次

hadoop 作业中的 org.apache.hadoop.fs.BlockMissingException

执行错误,从 org.apache.hadoop.hive.ql.exec.DDLTask 返回代码 1。无法验证 serde:org.apache.hadoop.hive.serde2.avro.A

hadoop错误org.apache.hadoop.mapred.TaskAttemptListenerImpl Progress of TaskAttempt

hadoop无法启动

Linux的hadoop运行hadoop的时候出现错误:找不到或者无法加载主类 org.apache.hadoop.fs.FsShell