配置hadoop集群服务之四-集群搭建

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了配置hadoop集群服务之四-集群搭建相关的知识,希望对你有一定的参考价值。

接下来开始真正意义上的集群搭建

Tip:hadoop集群搭建完以后,最好要格式化:hadoop namenode -format;

 

HDFS集群是否启动成功,看这两个进程:namenode/datanode;

Yarn集群是否启动成功,看这两个进程:Resourcemanager/Namemanager;

 

1、如果启动不了集群,说明hadoop下面的序列号生成信息出错了,需要清空,格式化,格式化命令:hdfs namenode -format,重启试试;清空目录的路径,/data/cloud/hadoop

150070查看datanode信息;

28088查看所有应用;(active nodes是启动的nodemanager的个数)

2、启动主节点之后,所有进程启动完毕,从节点正常应该有datanode的进程,如果没有,那就手动启动datanode,/sbin./hadoop.daemon.sh start datanode;

 

以上是关于配置hadoop集群服务之四-集群搭建的主要内容,如果未能解决你的问题,请参考以下文章

华为云Hadoop与Spark集群环境搭建

4.Hadoop集群搭建之启动

Hadoop3集群搭建之——hive添加自定义函数UDTF

Hadoop高手之路3-Hadoop集群搭建

Hadoop集群配置搭建

Hadoop集群的搭建及配置