Hadoop运行环境搭建完全解析

Posted 2022-11-28 做人要厚道2013

4.1 准备虚拟机环境

4.1.1 克隆虚拟机

---

4.1.2 修改克隆的虚拟机的静态ip

---

4.1.3 修改主机名

---

4.1.4 在/etc/hosts中做ip和域名之间的映射

---

4.1.5 创建 atguigu 用户, 并设置密码

---

4.1.6 给 atguigu 用户配置具有root权限

---

4.1.7 关闭防火墙

sudo chkconfig iptables off

4.1.8 在/opt目录下创建文件夹

1. /opt/software
   此目录用来存放开发工具的安装包.
   一会用来存放jdk和hadoop的安装包
2. /opt/module

此目录用来存放安装解压之后的文件.
一会用来存放jdk和hadoop解压之后的文件.

---

4.2 安装jdk

Hadoop需要在JDK上工作, 所以必须安装jdk

---

4.2.1 使用ftp工具将jdk安装报导入到/opt/software目录下

---

4.2.2 确认导入成功

---

4.2.3 解压jdk到/opt/module目录下

tar -zxvf jdk-8u172-linux-x64.tar.gz -C ../module/

---

4.2.4 配置jdk环境变量

1. 先copy jdk的目录
   

2. 配置JAVA_HOME和PATH
   打开etc/profile文件, 在文件末尾加入如下两行:

   export JAVA_HOME=/opt/module/jdk1.8.0_172
   export PATH=$JAVA_HOME/bin:$PATH

3. 保存退出
4. 让修改后的文件生效
   
sudo source /etc/profile

5. 测试JDK是否安装成功
   
java -version
javac -version


---

4.3 安装 Hadoop

4.3.1 把Hadoop安装包传递到/opt/software

---

4.3.2 解压

tar -zxvf hadoop-2.7.2.tar.gz -C ../module/

4.3.3 确认解压成功

cd /opt/module
ls

---

4.3.4 配置Hadoop环境变量

export HADOOP_HOME=/opt/module/hadoop-2.7.2 
export PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH

1. 保存退出
2. 使用文件生效
   
sudo source /etc/profile

3. 测试是否配置成功
   
hadoop version