移动新闻自适应采集方法研究

摘要：

通过分析面向传统新闻门户网站和面向移动新闻应用的新闻采集方法的异同,提出了一种面向移动新闻应用的自适应新闻采集方法.该方法先通过代理对移动新闻应用与服务器通信的数据包进行解析,构造出移动新闻应用的站点地图;然后通过模拟用户行为自适应地增量采集新闻数据,提高更新效率并保证新闻采集的完整性.以国内外20多家主流的移动新闻应用为实验对象开展验证,实验结果表明该方法的有效性和实时性.

关键词：移动新闻应用、新闻爬虫、站点地图、自适应、增量更新

所属期刊栏目：35

分类号：TP391.1(计算技术、计算机技术)

资助基金：赛尔网络下一代互联网技术创新项目NGII20151202

在线出版日期：2018-12-05（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：2798-2801