Hadoop-2.2.0如何編譯

發布時間：2021-12-08 11:02:05 來源：億速云閱讀：139 作者：小新欄目：云計算

這篇文章將為大家詳細講解有關Hadoop-2.2.0如何編譯，小編覺得挺實用的，因此分享給大家做個參考，希望大家閱讀完這篇文章后可以有所收獲。

具體過程如下：

下載Hadoop2.2.0源代碼包hadoop-2.2.0-src.tar.gz
地址：http://hadoop.apache.org/releases.html#Download
安裝相應的依賴包
yum -y install svn ncurses-devel gcc*
yum -y install lzo-devel zlib-devel autoconf automake libtool cmake openssl-devel
這些依賴包建議在linux系統聯網的情況下安裝
安裝并配置java環境
（1）從官網下載java安裝包
  http://www.oracle.com/technetwork/java/javase/downloads/index.html（選擇合適的版本，本文采用的是64位版本）
（2）配置java環境變量
  通常是在root用戶下修改/etc/下的profile文件，但是此改動會影響整個系統，所以我們采取第二種方法。在當前用戶（本文是hadoop用戶）下，ls -a，會發現有一個.bash_profile文件，這個文件是當前用戶的配置文件，其配置只會在當前用戶下生效。所以我們在此文件的末尾添加jdk的信息，如下：
  export JAVA_HOME=/home/hadoop/Java/jdk1.7.0_51
  export PATH=$JAVA_HOME/bin:$PATH
  export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
  保存退出，并執行source .bash_profile 命令即可。
（3）檢查java環境
  執行 java -version命令，即可看到安裝java的版本。
安裝maven工具
（1）下載地址：http://maven.apache.org/download.cgi
（2）將下載的工具包進行解壓后，配置其環境變量
  在.bahs_profile文件末尾添加如下內容：
  export MAVEN_HOME=/home/hadoop/maven
  export PATH=$PATH:$MAVEN_HOME/bin
安裝protobuf工具
（1）下載地址：http://code.google.com/p/protobuf/downloads/detail?name=protobuf-2.5.0.tar.gz
（2）protobuf工具需要進行編譯，按照如下步驟：
  解壓，設置屬主為root   chowd -R root.root protobuf-2.5.0
  編譯安裝protobuf
  ①cd protobuf-2.5.0
   ②./configure
  ③make
  ④make install
（3）檢查protobuf的安裝情況
  protoc --version
對hadoop2.2.0進行編譯
（1）執行官方的clean步驟
   mvn clean install –DskipTests（可能有一段時間）
  執行成功后會出來好多列success提示！！
（2）執行編譯
  接下來執行hadoop的編譯：
  mvn package-Pdist,native -DskipTests -Dtar
  等待一段時間后會提示已經安裝完成，如圖：
驗證hadoop的編譯情況
  （1）檢查編譯結果
   進入到hadoop源代碼所在目錄的/hadoop-dist/target 目錄，里邊會有編譯好的hadoop2.2.0如圖所示：

  （2）對編譯好的hadoop進行驗證
       1>進入到上步的hadoop2.2.0目錄中，會看到里邊的目錄與官方32位的系統目錄相同。

       2>進入到bin目錄中執行如下命令：
        ./hadoop version(列出hadoop的版本信息）

       3>進入到hadoop-2.2.0目錄中執行如下命令：
        file lib//native/*