基于Hadoop平台的日志分析模型

摘要：

为提高企业网络内海量日志数据的分析效率,构建基于Hadoop平台的日志分析模型.对模型框架进行总体设计,提出一种MapReduce编程模式的Apriori并行化算法,基于该算法对历史日志进行数据挖掘分析,计算用户行为的频繁模式,建立用户正常行为规则库,将实时日志与规则库中的规则进行模式匹配,实现对用户异常行为的检测.实验结果表明,该模型算法明显提高了日志分析效率.

关键词：Hadoop平台、日志分析、MapReduce编程模式、Apriori算法、数据挖掘、并行化

所属期刊栏目：37

分类号：TP391(计算技术、计算机技术)

在线出版日期：2016-04-19（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：338-344,428