项目描述：该项目是一个主营调味品的电商平台，是我们公司帮他们开发的 web 网站。经营了一年多以后又委托我们公司帮
他们开发配套的数据分析平台。
功能模块有：流量分析，访问分析，转化分析，访客分析，广告分析等。 用到的主要技术有：Flume，Kafka，Hive，
SparkStreaming，Redis等。
工作描述：
1、 设计MapReduce程序对日志进行清洗。
2、 利用spark对转化分析中的关键路径转化率进行计算分析。
3、 广告的实时点击利用Spark Streaming的窗口函数的窗口计算，找出用户黑名单存入Redis。
4、 生成事实表和维度表，结合两个表进行数据分析，并通过Sqoop导入Mysql数据库。