hadoop 源码包编译

Posted 2020-10-30

• 一：系统需求与软件包
• 二：系统环境初始化
• 三：hadoop 源代码编译

---

一：系统需求与软件包

• 系统

  CentOS6.4x64
  192.168.3.1  master.hadoop.com

• 软件需求

  Jdk7u76  apache-maven-2.5  protobuf-2.5   apache-ant  findbugs  hadoop-2.5.2

  ---

  二：系统环境初始化

• 安装系统依赖包

  yum install –y svn autoconf automake libtool cmake ncurses-devel openssl-devel gcc gcc-c++

• 安装软件

  #tar -zxvf jdk-7u67-linux-x64.tar.gz
  #tar -zxvf apache-maven-3.0.5-bin.tar.gz
  #tar -zxvf findbugs-3.0.0.tar.gz
  #tar –zxvf apache-ant-1.9.6-bin.tar.gz
  #rm –rf jdk-7u67-linux-x64.tar.gz
  #rm –rf apache-maven-3.0.5-bin.tar.gz
  #rm –rf findbugs-3.0.0.tar.gz
  #rm –rf apache-ant-1.9.6-bin.tar.gz
  #mv jdk1.7.67-* /usr/local/jdk
  #mv apache-maven-* /usr/local/maven
  #mv apache-ant-* /usr/local/ant
  #mv findbugs-* /usr/local/findbugs
  #vim /etc/profile

  

 #java -version

 #mvn –version

 #findbugs –version

 #ant –version

安装protobuf

  #tar -zxvf protobuf-2.5.0.tar.gz
  #cd protobuf-2.5.0
  # ./configure
  #make
  #make install
  #protoc

---

三：hadoop 源代码编译

   # tar -zxvf hadoop-2.5.2-src.tar.gz
   #cd hadoop-2.5.2
   # mvn clean package –Pdist,native –DskipTests –Dtar
   注释：
   执行这条命令之后会等待很长的时间。
如果有报错 error 则 环境配置有问题，需检查整个系统的JDK 环境。

#cd hadoop-dist/target 目录下有编译好的hadoop-2.5.2.tar.gz 包。