Hadoop环境搭建

Posted muyefengfei

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop环境搭建相关的知识,希望对你有一定的参考价值。

第一部分:Linux环境安装

Hadoop是运行在Linux,虽然借助工具也可以运行在Windows上,但是建议还是运行在Linux系统上,第一部分介绍Linux环境的安装、配置、Java JDK安装等。

第二部分:Hadoop本地模式安装

Hadoop本地模式只是用于本地开发调试,或者快速安装体验Hadoop,这部分做简单的介绍。

第三部分:Hadoop伪分布式模式安装

学习Hadoop一般是在伪分布式模式下进行。这种模式是在一台机器上各个进程上运行Hadoop的各个模块,伪分布式的意思是虽然各个模块是在各个进程上分开运行的,但是只是运行在一个操作系统上的,并不是真正的分布式。

第四部分:完全分布式安装

完全分布式模式才是生产环境采用的模式,Hadoop运行在服务器集群上,生产环境一般都会做HA,以实现高可用。

第五部分:Hadoop HA安装

HA是指高可用,为了解决Hadoop单点故障问题,生产环境一般都做HA部署。这部分介绍了如何配置Hadoop2.x的高可用,并简单介绍了HA的工作原理。 
安装过程中,会穿插简单介绍涉及到的知识。希望能对大家有所帮助。 

以上是关于Hadoop环境搭建的主要内容,如果未能解决你的问题,请参考以下文章

环境搭建-Hadoop集群搭建

Hadoop HA + HBase环境搭建————zookeeper和hadoop环境搭建

必成功的Hadoop环境搭建jdk环境搭建-超详细操作

分享知识-快乐自己:大数据(hadoop)环境搭建

Hadoop基础之环境搭建

Docker搭建Hadoop环境