格式化集群与启动集群

Posted Sam的博客

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了格式化集群与启动集群相关的知识,希望对你有一定的参考价值。

1.格式化集群

hdfs namenode -format

1.1格式化集群后将会在Hadoop目录下生成一个tmp文件夹

2.启动集群

2.2启动集群

2.2.1 在启动集群之前,首先输入jps指令,查看进程

2.2.2 启动hdfs的脚本

hadoop-daemon.sh :用于单独启动或关闭hdfs的某一个守护进程的脚本

hadoop-daemon.sh [start|stop] [namenode|datanode|secondarynamenode]


输入jps,此时发现多了一个namenode进程

start-dfs.sh,启动集群中的各个机器节点上的分布式文件系统的守护进程

start-dfs.sh
  • sam01上的进程
  • sam02上的进程
  • sam03上的进程

2.2.3 启动yarn

start-yarn.sh
  1. 在sam01上运行jps指令,会多出有如下进程
    resoucemanager
    nodemanager
  2. 在sam02上运行jps指令,会多出有如下进程
    nodemanager
  3. 在sam03上运行jps指令,会多出有如下进程
    nodemanager

启动hdfs和yarn进程的命令

start-all.sh

关闭hdfs和yarn进程的命令

stop-all.sh

3. 查看WebUI

3.1 HDFS

192.168.88.129:50070

3.2 YARN

192.168.88.129:8088

以上是关于格式化集群与启动集群的主要内容,如果未能解决你的问题,请参考以下文章

在hadoop集群中重新格式化namenode后重新启动datanode

格式化hdfs后,hadoop集群启动hdfs,namenode启动成功,datanode未启动

5. Hadoop集群操作

HDFS格式化namenode后启动集群datanode不启动

hdfs被格式化的后果与补救

操作Hadoop集群