基于Hadoop-Streaming+LNMP的网站流量分析系统的设计与实现

摘要

互联网技术发展迅速,各种各样网站开始大量的出现在互联网上,网站的PV统计显得尤为重要。目前网站PV的统计方法有多种,例如在网页上使用计数器等。这些统计方法适用于浏览量不高的网站,但是对与一些浏览量比较高的网站,来说就显得力不从心。针对上述问题,基于Hadoop-Streaming框架,设计开发一个流量统计工具以及数据可视化平台,可以对网站的访问情况,访问时间,访问页面等进行多维度统计,为网站调整运营架构提供可靠的数据依据。