Hadoop本地模式部署
Posted
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop本地模式部署相关的知识,希望对你有一定的参考价值。
系统支持:CentOS 6.3
部署资源:JDK1.7、Hadoop-2.2.0
hostname:reagina01
ipaddress:192.168.8.201
java version "1.7.0_80"
安装Hadoop:
[[email protected] ~]# mkdir /reagina
[[email protected] ~]# tar -zxvf hadoop-2.2.0-64bit.tar.gz -C /reagina/
修改/reagina/hadoop-2.2.0/etc/hadoop/目录下5个配置文件:
1、hadoop-env.sh
2、core-site.xml
3、hdfs-site.xml
4、mapred-site.xml
5、yarn-site.xml
将Hadoop添加到环境变量,编辑/etc/profile:
格式化HDFS(namenode)第一次使用时要格式化:
[[email protected] hadoop]# hadoop namenode -format
启动Hadoop(先启动HDFS,再启动YARN):
[[email protected] hadoop]# start-dfs.sh
[[email protected] hadoop]# start-yarn.sh
使用jps命令验证是否启动成功:
访问HDFS的管理界面:
访问MapReduce管理界面:
以上是关于Hadoop本地模式部署的主要内容,如果未能解决你的问题,请参考以下文章
大数据01_centos7部署hadoop-3-1-2本地模式与伪分布模式
Hadoop2.x-基础(HadoopHDFSYARNMapReduce安装与部署本地模式伪分布式完全分布式)