Hadoop-LZO 编译步骤

一、环境准备

• maven（下载安装，配置环境变量，修改sitting.xml加阿里云镜像）
• gcc-c++
• zlib-devel
• autoconf
• automake
• libtool

       通过yum安装即可：yum -y install gcc-c++ lzo-devel zlib-devel autoconf automake libtool

二、 下载、安装并编译 LZO

1. 点击下载 LZO： http://www.oberhumer.com/opensource/lzo/download/lzo-2.10.tar.gz
2. 解压：tar -zxf lzo-2.10.tar.gz
3. cd lzo-2.10
4. ./configure -prefix=/usr/local/hadoop/lzo/
5. make
6. make install

三、 编译 hadoop-lzo 源码

1. 下载 hadoop-lzo 的源码，点击直接下载：https://github.com/twitter/hadoop-lzo/archive/master.zip
2. 解压之后，修改 pom.xml：<hadoop.current.version>2.7.2</hadoop.current.version>
3. 声明两个临时环境变量：

   export C_INCLUDE_PATH=/usr/local/hadoop/lzo/include 
   export LIBRARY_PATH=/usr/local/hadoop/lzo/lib 

4. 编译： 进入hadoop-lzo-master，执行maven编译命令：mvn package -Dmaven.test.skip=true
5. 进入target，hadoop-lzo-0.4.21-SNAPSHOT.jar 即编译成功的hadoop-lzo组件