标签: 聚类分析

针对海量web日志数据在存储和计算方面存在的问题，结合当前的大数据技术，提出一种基于Hadoop与聚类分析的网络日志分析模型。利用Hadoop中的MapReduce编程模型对海量Web日志进行处理；利用HDFS结合的方式对数据进行存储；利用聚类分析算法构建web日志分析模型，对用户行为进行分析。最后通过搭建Hadoop测试环境对日志分析系统功能进行测试，并与单机系统比较，验证了该设计方案的优势。