高效5步走,高速搭建Hadoop2伪分布环境

Posted claireyuancy

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了高效5步走,高速搭建Hadoop2伪分布环境相关的知识,希望对你有一定的参考价值。

       前两天将Hadoop2的全然分布式搭建文档整理公布于网上(http://blog.csdn.net/aaronhadoop/article/details/24859369)。朋友相邀。就再将Hadoop2的伪分布式文档整理一下,搭建过Hadoop2全然分布式后,就笑对伪分布式”说声 呵呵吧。

       前期的jdk环境、SSH免密钥登录配置在此就不再赘述了。直接进入hadoop2的配置。

本文Hadoop2配置文件路径:/usr/local/hadoop/etc/hadoop。

       开启Hadoop2模式,start now

一、改动hadoop-env.sh
export JAVA_HOME=/usr/local/jdk1.7.0_45/

二、改动core-site.xml
<property>
<name>fs.default.name</name>
<value>hdfs://hadoop0:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/usr/local/hadoop/HadoopTmpDir</value>
</property>

手动创建文件夹
mkdir /usr/local/hadoop/HadoopTmpDir

三、改动hdfs-site.xml
<property>
<name>dfs.replication</name>
<value>1</value>
</property>

四、改动mapred-site.xml
cp mapred-site.xml.template  mapred-site.xml
<property>
<name>mapred.job.tracker</name>
<value>hadoop0:9001</value>
</property>

五、运行命令
hdfs namenode -format

start-dfs.sh
stop-dfs.sh

start-yarn.sh
stop-yarn.sh

验证
验证方式一,查看java守护进程
技术分享

验证方式二。web端
技术分享
技术分享


对于Hadoop2的配置及使用,建议当然还是全然分布式了。Hadoop VS Hadoop2,当中妙处。要体会,更要多言。哈哈。欢迎交流哟
OK,搞定!



















以上是关于高效5步走,高速搭建Hadoop2伪分布环境的主要内容,如果未能解决你的问题,请参考以下文章

Hadoop2.6.0伪分布环境搭建

Hadoop2.7.7伪分布式环境搭建(保姆级教程)

Hadoop2.x伪分布式环境搭建

hadoop2.7.3伪分布式环境搭建详细安装过程

搭建Hadoop2.9伪分布集群环境

Hadoop2.2.0伪分布式搭建简述