格式化集群与启动集群
Posted Sam的博客
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了格式化集群与启动集群相关的知识,希望对你有一定的参考价值。
1.格式化集群
hdfs namenode -format
1.1格式化集群后将会在Hadoop目录下生成一个tmp文件夹
2.启动集群
2.2启动集群
2.2.1 在启动集群之前,首先输入jps指令,查看进程
2.2.2 启动hdfs的脚本
hadoop-daemon.sh :用于单独启动或关闭hdfs的某一个守护进程的脚本
hadoop-daemon.sh [start|stop] [namenode|datanode|secondarynamenode]
输入jps,此时发现多了一个namenode进程
start-dfs.sh,启动集群中的各个机器节点上的分布式文件系统的守护进程
start-dfs.sh
- sam01上的进程
- sam02上的进程
- sam03上的进程
2.2.3 启动yarn
start-yarn.sh
- 在sam01上运行jps指令,会多出有如下进程
resoucemanager
nodemanager - 在sam02上运行jps指令,会多出有如下进程
nodemanager - 在sam03上运行jps指令,会多出有如下进程
nodemanager
启动hdfs和yarn进程的命令
start-all.sh
关闭hdfs和yarn进程的命令
stop-all.sh
3. 查看WebUI
3.1 HDFS
192.168.88.129:50070
3.2 YARN
192.168.88.129:8088
以上是关于格式化集群与启动集群的主要内容,如果未能解决你的问题,请参考以下文章
在hadoop集群中重新格式化namenode后重新启动datanode
格式化hdfs后,hadoop集群启动hdfs,namenode启动成功,datanode未启动