cdh编译安装支持各种压缩格式

在安装CDH版本的hadoop的时候, 我们下载下来的CDH的hadoop安装包中, 并没有native包,不支持各个任务阶段的压缩功能，但在生产任务中是必须要支持压缩功能的，所以要对CDH进行编译以支持压缩功能；

本次编译使用的各软件版本：

    cdh：hadoop-2.6.0-cdh5.7.0-src.tar.gz

    jdk：1.7

    maven：apache-maven-3.3.9-bin.tar.gz

    protobuf：protobuf-2.5.0.tar.gz

配置jdk的环境变量：

[root@hadoop004 soft]# cat /etc/profile.d/java.sh 
export JAVA_HOME=/usr/java/jdk
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$JAVA_HOME/bin:$PATH

[root@hadoop004 soft]# java -version
java version "1.7.0_79"
Java(TM) SE Runtime Environment (build 1.7.0_79-b15)
Java HotSpot(TM) 64-Bit Server VM (build 24.79-b02, mixed mode)

配置maven的环境变量：

#配置环境变量
[root@hadoop004 soft]# cat /etc/profile.d/maven.sh 
MAVEN_HOME=/data/soft/maven
export PATH=$MAVEN_HOME/bin:$PATH

[root@hadoop004 soft]# mvn --version
Apache Maven 3.3.9 (bb52d8502b132ec0a5a3f4c09453c07478323dc5; 2015-11-11T00:41:47+08:00)
Maven home: /data/soft/maven
Java version: 1.7.0_79, vendor: Oracle Corporation
Java home: /usr/java/jdk1.7.0_79/jre
Default locale: en_US, platform encoding: UTF-8
OS name: "linux", version: "3.10.0-862.3.2.el7.x86_64", arch: "amd64", family: "unix"

#配置mvn的本地存放地址
<localRepository>/data/soft/maven/repo</localRepository>
#配置mvn下载源为阿里云的maven仓库
<mirror>
	<id>alimaven</id>
	<name>aliyun maven</name>
	<url>http://maven.aliyun.com/nexus/content/groups/public/</url>
	<mirrorOf>central</mirrorOf>
</mirror>

编译安装protobuf并配置环境变量：

#编译安装命令
tar -zxvf protobuf-2.5.0.tar.gz
cd protobuf-2.5.0
./configure  --prefix=/root/protobuf/
make
make install

#配置环境变量
[root@hadoop004 soft]# cat /etc/profile.d/protobul.sh 
PROTOC_HOME=/usr/local/protobuf
export PATH=$PROTOC_HOME/bin:$PATH
source /etc/profile.d/protobul.sh
#查看是否安装成功
[root@hadoop004 soft]# protoc --version
libprotoc 2.5.0