hadoop安装踩坑

Posted wanshiming

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop安装踩坑相关的知识,希望对你有一定的参考价值。

 

切记!!!!!

没有比官网教程更详细,更靠谱的教程!!!!!

其他的基本都是官网的翻译,但是官网的教程是实时更新的,要是不注意版本,坑根本就踩不完!!!

附上官网部署教程:

https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html

 

单节点的安装只需要关注两个点:

  1.linux安装的java版本,各个版本的hadoop对java版本是要求的,具体信息如下:

    https://cwiki.apache.org/confluence/display/HADOOP/Hadoop+Java+Versions

  2.在多次执行hdfs dfs -format后,namenode和datanode的clusterid可能对不上,在format之前需要删除tmp/hadoop-hadoop目录

 

以上是关于hadoop安装踩坑的主要内容,如果未能解决你的问题,请参考以下文章

HUE再hadoop集群下安装开始踩坑

Ubuntu搭建Hadoop的踩坑之旅

hadoop全配置及易踩坑收录

电商数据仓库项目简介

Hadoop编程踩坑

HADOOP HA 踩坑 - org.apache.hadoop.hdfs.qjournal.protocol.JournalNotFormattedException: Journal Storag