腾讯广告的数据分析系统

摘要

任务越来越多，计算资源消耗越来越大，合并原始数据聚合的工作，减少重复IO和数据解析的开销，多个pig,hive,mapreduce->一个mapreduce生成多个聚合结果，一份代码，易于性能优化，时间均匀分布，提高集群利用率。