面向主题的网络爬虫系统功能模块设计探析
爬虫策略是主题爬虫的核心模块,其策略的目的在于高效的抓取到更多与主题相关的页面,同时又过滤与主题无关的页面.该文主要对面向主题的爬虫项目需求进行研究,提出了分层的系统框架,并详细介绍了框架架构以及各个模块的设计,最后给出系统的运行结果截图,初步达到了预期的效果.
网络爬虫、功能模块、设计
13
TP393(计算技术、计算机技术)
2017-06-13(万方平台首次上网日期,不代表论文的发表时间)
共2页
38-39
点击收藏,不怕下次找不到~
网络爬虫、功能模块、设计
13
TP393(计算技术、计算机技术)
2017-06-13(万方平台首次上网日期,不代表论文的发表时间)
共2页
38-39
国家重点研发计划“现代服务业共性关键技术研发及应用示范”重点专项“4.8专业内容知识聚合服务技术研发与创新服务示范”
国家重点研发计划资助 课题编号:2019YFB1406304
National Key R&D Program of China Grant No. 2019YFB1406304
©天津万方数据有限公司 津ICP备20003920号-1
违法和不良信息举报电话:4000115888 举报邮箱:problem@wanfangdata.com.cn