基于日志分析的增量数据捕获方法研究

摘要：

通过扫描数据库日志文件可以捕获变化数据，但已有研究仅适应某种特定类型的数据库管理系统并且缺乏对冗余信息的消除。针对上述不足，提出一个基于日志分析的增量数据检测及其净效应处理通用模型，描述增量检测过程中的通用处理步骤，即日志抽取、日志分析和净效应处理3个模块。通过实验对净效应处理速度、冗余数据压缩率、网络传输速度等因素进行分析，结果表明，净效应处理可以有效地减少数据的网络传输时间和更新时间，提高运行效率。

关键词：信息集成、增量检测、冗余信息、日志分析、日志抽取、净效应

分类号：TP311(计算技术、计算机技术)

资助基金：武汉大学软件工程国家重点实验室开放基金资助项目SKLSE2012-09-37;公安部技术研究计划基金资助项目2014 JSYJB048。

在线出版日期：2015-07-02（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：56-60,65