hadoop安装和环境配置

Posted 2020-10-19 努力中国

一.安装java

1.下载 ： yum install java-1.7.0-openjdk

2、配置环境变量 vim /etc/profile

   要先看自己安装的java全名

然后再环境配置

 

 

export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64/
export JRE_HOME=$JAVA_HOME/jre
export HADOOP_HOME=/opt/hadoop-1.2.1
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$PATH

3、让配置生效  source /etc/profile

 

二。配置hadoop

1.下载并安装

wget  https://archive.apache.org/dist/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz

 

 

配置文件

(1)配置下面文

 export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64/

 

 (2)配置下面文件

 <property>
    <name>hadoop.tmp.dir</name>
    <value>/hadoop</value>
  </property>
  <property>
    <name>dfs.name.dir</name>
    <value>/hadoop/name</value>
  </property>
  <property>
    <name>fs.default.name</name>
    <value>hdfs://localhost:9000</value>
  </property>

 (3)vim hdfs-site.xml

hdfs-site.xml

<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>

(4)配置任务调度器

mapred-site.xml
<property>
    <name>mapred.job.tracker</name>
    <value>localhost:9001</value>
</property>

最后还得配置这个文件

 

 

最后测试hadoop环境。(那个警告没有关系)

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

*vim不需要进入命令编辑模式 按住shift zz  ， （2）vim中按 i 插入写。(3)

按一下 ESC 退出，然后 按 : 键，然后输入 wq 保存并退出的意思，再打回车，即可退出编辑状态