重启电脑后Namenode无法启动（hadoop 2.7.3）

Posted 2023-02-16

【中文标题】重启电脑后Namenode无法启动（hadoop 2.7.3）

【英文标题】：Namenode not start after restart pc (hadoop 2.7.3)

【发布时间】：2017-04-04 12:46:43

【问题描述】：

我在 ubuntu 16.04 上配置了 hadoop 2.7.3 并运行所有（字数统计和其他 mapReduce 运行所有）。 重启电脑后，我启动了 start-dfs，但 namenode 没有启动。其他指南说删除临时目录，但我没有。

这是我的文件：

核心站点.xml

<configuration>
 <property>
   <name>fs.defaultFS</name>
   <value>hdfs://localhost:9000</value>
 </property>
</configuration>

hdfs-site.xml

<configuration>
 <property>
   <name>dfs.replication</name>
   <value>1</value>
 </property>
</configuration>

【问题讨论】：

可以分享name节点日志吗？

Pseudo Distributed Mode Hadoop的可能重复

@DeepanRam 这是日志：2017-04-04 15:25:36,095 错误 org.apache.hadoop.hdfs.server.namenode.NameNode：无法启动名称节点。 org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: 目录 /tmp/hadoop-alessio/dfs/name 处于不一致状态：存储目录不存在或不可访问。

重启后删除“/tmp”下的文件夹和结构。尝试将它们更改为本地结构并尝试授予它们 775 权限并重新启动服务。

@DeepanRam 我如何更改“/tmp”并授予 775 权限？

【参考方案1】：

Step 1: Create the folders like below:
      -- sudo mkdir /dfs
      -- sudo chown username:username /dfs/*
      -- sudo chmod 755 /dfs/
      -- cd /dfs
      If the machine is name node then:
          -- mkdir nn 
      if data node: 
          -- mkdir data

Step 2:
add below properties in hdfs-site.xml
<configuration>
        <configuration>
            <property>
                <name>dfs.replication</name>
                <value>1</value>
            </property>
        </configuration>
        <configuration>
            <property>
                <name>dfs.namenode.name.dir</name>
                <value>/dfs/nn</value>
            </property>
        </configuration>
        <configuration>
            <property>
                <name>dfs.datanode.data.dir</name>
                <value>/dfs/data</value>
            </property>
        </configuration>


</configuration>
step 3:
 format the namenode: hadoop namenode -format
step 4:
 start all services 

【讨论】：

现在不要启动datanode（和namenode）！ namenode和datanode（dfs/nn和dfs/data）的路径有错误

错误 org.apache.hadoop.hdfs.server.namenode.NameNode：无法启动名称节点。 org.apache.hadoop.hdfs.server.common.InconsistentFSStateExce‌​ption：目录/tmp/hadoop-alessio/dfs/name处于不一致状态：存储目录不存在或不可访问。

是的，但是每次重启都会删除tmp文件夹，并且不会创建namenode

你能分享一下“hadoop namenode -format”的日志信息吗？

将日志消息发送到此邮件 ID：[e-mail]