hadoop平台搭建步骤

Posted syunie

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop平台搭建步骤相关的知识,希望对你有一定的参考价值。

一、克隆虚拟机更改虚拟级网卡

vi /ectc/udev/rules.d/70-persistent-net.rules

留“ech1”最大的网卡,记下ATTR==“。。。”一会儿需要更改

vi /etc/sysconfig/network-scripts/ifcfg-eth0

改“ONBOOT=YES”

改ATTR

重启网卡 service network restart

二、用Linux下载hadoop的插件

1.切换root用户 su root

2.yum -y install vim

3.yum -y install openssh-clients

4.创建新用户groot,mkdir soft

5.ls, cd  soft

三、两个虚拟机都安装JDK、Hadoop

1.拷贝jdk与hadoop包放入soft中

2.解压tar -xzvf jdk

3.移动hadoop  mv hadoop-2.6.1 hadoop

4.进入根目录  cd ~ 拷贝文件 cp .bashrc bashrc

5.配置环境变量 vim .bashrc

export JAVA_HMOE=/home/groot/soft/jdk

export HADOOP_HOME=/home/groot/soft/hadoop

export PATH=$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH

6.生效更改文件source ./bashrc

7.测试配置环境命令 java、javac、hadoop

8.scp .bashrc [email protected]:~/    配置文件放在/hadoop/etc/hadoop/

9.vim /etc/sysconfig/network 设置master和slave(需要切换root权限)

10.vim /etc/hosts 添加IP 例如192.0.0.1 master 192.0.0.2 slave

11.重启reboot

四、配置免密登录密钥

 

以上是关于hadoop平台搭建步骤的主要内容,如果未能解决你的问题,请参考以下文章

如何搭建基于Hadoop的大数据平台

4 基于Hadoop的平台搭建与MapReduce作业设计

大数据Hadoop学习之搭建Hadoop平台(2.1)

ambari 搭建hadoop大数据平台系列3-搭建本地仓库

Hadoop集群大数据平台搭建

Hadoop完全云计算平台搭建