hadoop Web页面 Datanode Volume Failures看不到任务状态

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop Web页面 Datanode Volume Failures看不到任务状态相关的知识,希望对你有一定的参考价值。

参考技术A 你应该是格式话namenode了是吧。需要把datanode的编辑日志和镜像文件全部删除就好了吧。

Hadoop2.6DataNode服务未启动

Hadoop2.6DataNode服务未启动


1、Hadoop2.6安装完成之后,在DataNode上jps发现没有NataNode服务,很奇怪

查看日志,之后发现原因是hadoop安装好之后,格式化多次,VERSION版本不同,造成的clusterid主从节点不一样

[[email protected] hadoop-2.6.0]$ cat /usr/local/hadoop-2.6.0/logs/hadoop-hadoop-datanode-master.log

日志如下:datanode的clusterID 和 namenode的clusterID 不匹

技术分享


2、解决办法: 

根据日志中的路径,分别进入master和slave的VERSION配置文件,将master的clusterID覆盖slave clusterID,slave1和slave2的文件都要覆盖。

[[email protected] current]$ vim /usr/local/hadoop-2.6.0/dfs/data/current/VERSION

clusterID=  修改为:

[[email protected] hadoop-2.6.0]$ vim /usr/local/hadoop-2.6.0/dfs/data/current/VERSION

clusterID=CID-e2b9d454-1616-4294-98f5-2c9cddc9f186

让两个保持一致

技术分享


3、然后重启,启动后执行jps,查看进程,DataNode服务就启动了

[had[email protected] current]$ jps

15184 Jps

15028 DataNode

2488 NodeManager


参考博客:http://blog.csdn.net/zhangt85/article/details/42078347


本文出自 “梅花香自苦寒来!” 博客,请务必保留此出处http://daixuan.blog.51cto.com/5426657/1745763

以上是关于hadoop Web页面 Datanode Volume Failures看不到任务状态的主要内容,如果未能解决你的问题,请参考以下文章

hadoop2.4版本中yarn的web管理界面不能查看作业状态!!!求助

hadoop源代码解读namenode高可靠:HA;web方式查看namenode下信息;dfs/data决定datanode存储位置

hadoop 使用ip配置导致hdfs启动失败

hadoop中datanode怎么启动

Hadoop 2.6.3动态增加/删除DataNode节点

手动处理datanode磁盘间使用不均的问题