Hadoop启动后没有DataNote进程

Posted 指掀涛澜

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop启动后没有DataNote进程相关的知识,希望对你有一定的参考价值。

Hadoop在多次运行下列指令:

hadoop namenode -format
sbin/start-dfs.sh

经常会出现没有启动datanode的情况。
运行命令:

  1. jps

发现没有datanode线程。
现给出原因和解决方案

原因

当我们使用hadoop namenode -format格式化namenode时,会在namenode数据文件夹(这个文件夹为自己配置文件中dfs.name.dir的路径)中保存一个current/VERSION文件,记录clusterID,datanode中保存的current/VERSION文件中的clustreID的值是上一次格式化保存的clusterID,这样,datanode和namenode之间的ID不一致。

解决方法

  • 第一种:如果dfs文件夹中没有重要的数据,那么删除dfs文件夹,再重新运行下列指令:
    1. hadoop namenode -format
    2. sbin/start-dfs.sh
  • 第二种:如果dfs文件中有重要的数据,那么在dfs/name目录下找到一个current/VERSION文件,记录clusterID并复制。然后dfs/data目录下找到一个current/VERSION文件,将其中clustreID的值替换成刚刚复制的clusterID的值即可;

总结

其实,每次运行结束Hadoop后,都应该关闭Hadoop.

sbin/stop-dfs.sh

下次想重新运行Hadoop,不用再格式化namenode,直接启动Hadoop即可

sbin/start-dfs.sh




以上是关于Hadoop启动后没有DataNote进程的主要内容,如果未能解决你的问题,请参考以下文章

apache hadoop2.6 正常启动后jps下有几个进程?没有DateNode节点正常吗

Hadoop的多节点集群启动,唯独没有namenode进程?(血淋淋教训,一定拍快照)

hadoop(两台win7+cygwin+hadoop)启动后日志都没有错,运行一个程序出错了:

HADOOP配置的时候,在master机子上输入JPS命令后,没有看到namenode和jobtrack的进程?

4.Hadoop集群搭建之启动

Hadoop重启,部分进程没有成功开启