hadoop错误org.apache.hadoop.util.DiskChecker$DiskErrorException Could not find any valid local directo
Posted
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop错误org.apache.hadoop.util.DiskChecker$DiskErrorException Could not find any valid local directo相关的知识,希望对你有一定的参考价值。
错误:
org.apache.hadoop.util.DiskChecker$DiskErrorException: Could not find any valid local directory for
原因:
两种可能,hadoop.tmp.dir或者data目录存储空间不足
解决办法:
看了一下我的dfs状态,data使用率不到40%,所以推测是hadoop.tmp.dir空间不足,导致无法创建Jog临时文件。查看core-site.xml发现没有配置hadoop.tmp.dir,因此使用的是默认的/tmp目录,在这目录一旦服务器重启数据就会丢失,因此需要修改。添加:
<property>
<name>hadoop.tmp.dir</name>
<value>/data/tmp</value>
</property>
然后重新格式化:hadoop namenode –format,再重启
如果,您认为阅读这篇博客让您有些收获,不妨点击一下右下角的【推荐】。
如果,您希望更容易地发现我的新博客,不妨点击一下左下角的【关注我】。
如果,您对我的博客所讲述的内容有兴趣,请继续关注我的后续博客,我是【刘超★ljc】。
本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。
以上是关于hadoop错误org.apache.hadoop.util.DiskChecker$DiskErrorException Could not find any valid local directo的主要内容,如果未能解决你的问题,请参考以下文章
错误:org.apache.hadoop.hbase.MasterNotRunningException:重试 7 次
hadoop 作业中的 org.apache.hadoop.fs.BlockMissingException
执行错误,从 org.apache.hadoop.hive.ql.exec.DDLTask 返回代码 1。无法验证 serde:org.apache.hadoop.hive.serde2.avro.A
hadoop错误org.apache.hadoop.mapred.TaskAttemptListenerImpl Progress of TaskAttempt
Linux的hadoop运行hadoop的时候出现错误:找不到或者无法加载主类 org.apache.hadoop.fs.FsShell