1. 程式人生 > >hadoop 源碼包編譯

hadoop 源碼包編譯

大數據 hadoop

  • 一:系統需求與軟件包
  • 二:系統環境初始化
  • 三:hadoop 源代碼編譯

一:系統需求與軟件包

  • 系統
    CentOS6.4x64
    192.168.3.1  master.hadoop.com
  • 軟件需求
    Jdk7u76  apache-maven-2.5  protobuf-2.5   apache-ant  findbugs  hadoop-2.5.2

    二:系統環境初始化

  • 安裝系統依賴包
    yum install –y svn autoconf automake libtool cmake ncurses-devel openssl-devel gcc gcc-c++
  • 安裝軟件
    #tar -zxvf jdk-7u67-linux-x64.tar.gz
    #tar -zxvf apache-maven-3.0.5-bin.tar.gz
    #tar -zxvf findbugs-3.0.0.tar.gz
    #tar –zxvf apache-ant-1.9.6-bin.tar.gz
    #rm –rf jdk-7u67-linux-x64.tar.gz
    #rm –rf apache-maven-3.0.5-bin.tar.gz
    #rm –rf findbugs-3.0.0.tar.gz
    #rm –rf apache-ant-1.9.6-bin.tar.gz
    #mv jdk1.7.67-* /usr/local/jdk
    #mv apache-maven-* /usr/local/maven
    #mv apache-ant-* /usr/local/ant
    #mv findbugs-* /usr/local/findbugs
    #vim /etc/profile

    技術分享圖片

 #java -version

技術分享圖片

 #mvn –version

技術分享圖片

 #findbugs –version

技術分享圖片

 #ant –version

技術分享圖片

安裝protobuf

  #tar -zxvf protobuf-2.5.0.tar.gz
  #cd protobuf-2.5.0
  # ./configure
  #make
  #make install
  #protoc

技術分享圖片


三:hadoop 源代碼編譯

   # tar -zxvf hadoop-2.5.2-src.tar.gz
   #cd hadoop-2.5.2
   # mvn clean package –Pdist,native –DskipTests –Dtar
   註釋:
   執行這條命令之後會等待很長的時間。
如果有報錯 error 則 環境配置有問題,需檢查整個系統的JDK 環境。

技術分享圖片

#cd hadoop-dist/target 目錄下有編譯好的hadoop-2.5.2.tar.gz 包。

技術分享圖片

hadoop 源碼包編譯