网站日志流量分析系统之数据清洗处理（离线分析） 网站日志流量分析系统之（日志收集） 网站日志流量分析系统

一、概述

　　网站日志流量分析系统之（日志收集）已将数据落地收集并落地至HDFS，根据网站日志流量分析系统中架构图，接下来要做的事情就是做离线分析，编写MR程序或通过手写HQL对HDFS中的数据进行清洗；这里我选择用Hive来对HDFS中的数据进行清洗。

二、数据清洗实现