基于MapReduce的Web日志挖掘

作     者：李彬 刘莉莉 LI Bin;LIU Lili

作者机构：中国矿业大学计算机科学与技术学院江苏徐州221116 

出 版 物：《计算机工程与应用》 (Computer Engineering and Applications)

年 卷 期：2012年第48卷第22期

页      码：95-98页

摘      要：针对单一CPU节点的Web数据挖掘系统在挖掘Web海量数据源时存在的计算瓶颈问题,利用云计算的分布式处理和虚拟化技术优势以及蚁群算法并行性的优点,设计一种基于Map/Reduce架构的Web日志挖掘算法。为进一步验证该算法的高效性,通过搭建Hadoop平台,利用该算法挖掘Web日志中用户的偏爱访问路径。实验结果表明,充分利用了集群系统的分布式计算能力处理大量的Web日志文件,可以大大地提高Web数据挖掘的效率。

主 题 词：云计算 Map/Reduce Hadoop平台 Web日志挖掘 蚁群算法 

学科分类：08[工学] 0835[0835] 081202[081202] 0812[工学-测绘类] 

核心收录：

D　O　I：10.3778/j.issn.1002-8331.2012.22.020

馆 藏 号：203134496...