基于Hadoop和Storm的网站流量分析软件的设计与实现.doc

基于Hadoop和Storm的网站流量分析软件的设计与实现

DesignandImplementationofWebTrafficAnalysisSoftwareBasedonHadoopandStorm

摘要

本设计的主要目的是对网站用户的行为信息进行收集，并进行一定的处理分析，进一步去了解网站的运行情况，为网站的管理人员提供改进的依据。

本文所讲述的网站流量分析设计将采用大数据相关的技术。在过去的网站流量分析中存在着很多问题，首先，如果网站流量分析平台超载，数据会丢失，历史数据的计算效率会降低；另外，传统的网站流量分析项目在用户进行重复登录时会产生重复统计，具有局限性。现在我们