基于MapReduce的HDFS数据窃取随机检测算法

摘要：

为了解决分布式云计算存储的数据窃取检测中,出现数据量大、内部窃取难以检测的问题,以hadoop分布式文件系统(HDFS,hadoop distributed file system)为检测对象,提出了一种基于MapReduce的数据窃取随机检测算法.分析HDFS文件夹复制产生的MAC时间戳特性,确立复制行为的检测与度量方法,确保能够检测包括内部窃取的所有窃取模式.设计适合于MapReduce任意的任务划分,同时记录HDFS层次关系的输入数据集,实现海量时间戳数据的高效分析.实验结果表明,该算法能够通过分段检测策略很好地控制漏检率和误检文件夹数量,并且具有较高的执行效率和良好的可扩展性.

关键词：随机检测算法、HDFS、MapReduce、MAC时间戳、云计算存储

所属期刊栏目：39

分类号：TP311.1(计算技术、计算机技术)

资助基金：国家高技术研究发展计划（863计划）;国家自然科学基金

在线出版日期：2018-12-13（万方平台首次上网日期，不代表论文的发表时间）

页数：共11页

页码：11-21