Hadoop 环境准备

Posted 黎明踏浪

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop 环境准备相关的知识,希望对你有一定的参考价值。

Hadoop 2.7.4 + HBase 1.2.6 + ZooKeeper 3.4.10 配置

本文为上述配置的一部分,为方便阅读,故设为独立页面

 

1:系统环境

宿主机:window 7

虚拟机管理系统:VitualBox 5.1.26

虚拟机系统:ubuntu 17.04

JDK:1.8.0_151

 

  • 创建3vitualbox 虚拟机
  • 修改/etc/hosts:

192.168.2.1 master

192.168.2.2 slave1

192.168.2.3 slave2

  • 修改/etc/hostname:

每台虚拟机分别为master, slave1, slave2

 

  • 修改环境变量:

对于当前用户,编辑用户主目录下的隐藏文件 ~/.bashrc 如下

若想对所有用户起作用,则可以修改文件 /etc/profile

编辑完后,执行 source ~/.bashrc 或者重新登录可生效

 

2:确定软件版本 http://hbase.apache.org/book.html#arch.overview

Hadoop version support matrix

  • "S"      = supported
  • "X"      = not supported
  • "NT"      = Not tested

 

 

HBase-1.1.x

HBase-1.2.x

HBase-1.3.x

HBase-2.0.x

Hadoop-2.0.x-alpha

X

X

X

X

Hadoop-2.1.0-beta

X

X

X

X

Hadoop-2.2.0

NT

X

X

X

Hadoop-2.3.x

NT

X

X

X

Hadoop-2.4.x

S

S

S

X

Hadoop-2.5.x

S

S

S

X

Hadoop-2.6.0

X

X

X

X

Hadoop-2.6.1+

NT

S

S

S

Hadoop-2.7.0

X

X

X

X

Hadoop-2.7.1+

NT

S

S

S

Hadoop-2.8.0

X

X

X

X

Hadoop-2.8.1

X

X

X

X

Hadoop-3.0.0-alphax

NT

NT

NT

NT

以上是关于Hadoop 环境准备的主要内容,如果未能解决你的问题,请参考以下文章

Hadoop中HDFS的API操作客户端环境准备配置HADOOP_HOME环境变量

Hadoop之HDFS(客户端操作) 1.环境准备

Hadoop集群搭建之环境准备

YARN && Hadoop 集群环境准备

Hadoop 环境准备

Hadoop--1.环境准备