hadoop 3.0.0 alpha1 伪分布式搭建

Posted 2020-08-12

一、安装opensjdk 1.8.0

yum install java-1.8.0-openjdk -y

二、下载hadoop 3.0.0

wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-3.0.0-alpha1/hadoop-3.0.0-alpha1.tar.gz

三、配置hadoop

1、解压hadoop

2、编辑 etc/hadoop/hadoop-env.sh

export JAVA_HOME=‘/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.102-1.b14.el7_2.x86_64/jre‘

3、编辑etc/hadoop/core-site.xml:

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://192.168.56.101:9000</value>
    </property>
</configuration>

4、编辑etc/hadoop/hdfs-site.xml:

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
</configuration>

5、配置无密码登录

ssh-keygen
ssh-copy-id 192.168.56.101

6、格式化文件系统

bin/hdfs namenode -format

7、启动 NameNode 和 DataNode

sbin/start-dfs.sh

8、通过web浏览 NameNode  

http://192.168.56.101:9870/

本文出自 “武陵荒草” 博客，请务必保留此出处http://penguintux.blog.51cto.com/3021117/1858054