高效5步走,高速搭建Hadoop2伪分布环境
Posted claireyuancy
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了高效5步走,高速搭建Hadoop2伪分布环境相关的知识,希望对你有一定的参考价值。
前两天将Hadoop2的全然分布式搭建文档整理公布于网上(http://blog.csdn.net/aaronhadoop/article/details/24859369)。朋友相邀。就再将Hadoop2的伪分布式文档整理一下,搭建过Hadoop2全然分布式后,就笑对“伪分布式”说声 呵呵吧。
前期的jdk环境、SSH免密钥登录配置在此就不再赘述了。直接进入hadoop2的配置。
本文Hadoop2配置文件路径:/usr/local/hadoop/etc/hadoop。
开启Hadoop2模式,start now
一、改动hadoop-env.sh
export JAVA_HOME=/usr/local/jdk1.7.0_45/
二、改动core-site.xml
<property>
<name>fs.default.name</name>
<value>hdfs://hadoop0:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/usr/local/hadoop/HadoopTmpDir</value>
</property>
手动创建文件夹
mkdir /usr/local/hadoop/HadoopTmpDir
三、改动hdfs-site.xml
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
四、改动mapred-site.xml
cp mapred-site.xml.template mapred-site.xml
<property>
<name>mapred.job.tracker</name>
<value>hadoop0:9001</value>
</property>
五、运行命令
hdfs namenode -format
start-dfs.sh
stop-dfs.sh
start-yarn.sh
stop-yarn.sh
验证
验证方式一,查看java守护进程
验证方式二。web端
对于Hadoop2的配置及使用,建议当然还是全然分布式了。Hadoop VS Hadoop2,当中妙处。要体会,更要多言。哈哈。欢迎交流哟
OK,搞定!
以上是关于高效5步走,高速搭建Hadoop2伪分布环境的主要内容,如果未能解决你的问题,请参考以下文章