Centos源碼編譯安裝Hadoop2.6

1. Centos6.5(64bit)      

2. jdk7      

3. ant1.9.4  

4. maven3.1.1  

5. findbugs3.0.0  

6. protobuf2.5.0  

7. hadoop2.5.1 源代碼文件  

二、安裝以上所需的所有軟件

1.yum可安裝的軟件

[html] view plaincopy

1. yum install svn ncurses-devel gcc* lzo-devel zlib-devel autoconf automake libtool cmake openssl-devel  

2.安裝JDK

[html] view plaincopy

1. rpm -ivh jdk-8-linux-x64.rpm  

2.   

3. vim  /etc/profile  

4. export JAVA_HOME=/usr/java/jdk1.7.0  

5. export JRE_HOME=/usr/java/jdk1.7.0/jre  

6. export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH  

7. export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar  

3.安裝ant

[html] view plaincopy

1. tar zxvf apache-ant-1.9.4-bin.tar.gz  

2.   

3. vim /etc/profile  

4. export ANT_HOME=/usr/local/apache-ant-1.9.4  

5. export PATH=$PATH:$ANT_HOME/bin  

4.安裝findbugs

[html] view plaincopy

1. tar zxvf findbugs-3.0.0.tar.gz  

2.   

3. vim /etc/profile  

4. export FINDBUGS_HOME=/usr/local/findbugs-3.0.0  

5. export PATH=$PATH:$FINDBUGS_HOME/bin  

5.安裝protobuf

[html] view plaincopy

1. tar zxvf protobuf-2.5.0.tar.gz  

2. cd protobuf-2.5.0  

3. ./configure --prefix=/usr/local  

4. make && make install  

6.安裝maven

[html] view plaincopy

1. tar -zxvf apache-maven-3.1.1-bin.tar.gz  

2.   

3. vim /etc/peofile  

4. export M2_HOME=/usr/local/apache-maven-3.1.1  

5. export PATH=$PATH:$JAVA_HOME/bin:$M2_HOME/bin  

三、編譯hadoop源碼

[html] view plaincopy

1. tar zxvf hadoop-2.5.1-src.tar.gz  

2. cd hadoop-2.5.1-src  

3. mvn package -Pdist,native,docs -DskipTests -Dtar  

最后的文件就在hadoop-2.5.1-src/hadoop-dist/target中

至此，自己編譯的hadoop2.5.1已經(jīng)完成，經(jīng)測(cè)試不會(huì)再在運(yùn)行的時(shí)候出現(xiàn)warning了，確實(shí)讓人開心！

另外：如果在編譯的時(shí)候出現(xiàn)問(wèn)題，不妨考慮一下jdk的版本以及各個(gè)軟件的版本的問(wèn)題，我最初用的是jdk8，一直報(bào)錯(cuò)，最后嘗試了一下jdk7才算成功。