一种基于云计算的并行流生成方法

摘要：

在高速网络中，网络设备的分组转发性能在打开流采集功能后会受其影响。为此，提出一种在网络设备外基于云计算平台的并行流生成方法。在需要监测的网络设备附近部署小型云，把分组流量复制到云中，采用云的Map-Reduce并行处理框架快速地从海量分组数据中生成流记录。设计基于Map-Reduce框架的并行流生成算法，通过配置合适数量的云节点，可分析任意大小的网络流量。用实际网络分组数据对并行流生成方法的性能进行验证，实验结果表明，在由3台、5台或7台节点构成的小型云平台上，从超过40 GB的文本分组数据中共提取了15160052条流，与顺序处理陒比，耗费时间至少可减小85%、90%和94%。

关键词：网络流量分析、并行处理、Map-Reduce框架、Hadoop平台

分类号：TP393.02(计算技术、计算机技术)

资助基金：陕西省教育厅自然科学基金资助项目11JK1018

在线出版日期：2013-12-04（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：10-13