基于网络爬虫技术的数字资源检测软件的设计与实现

摘要：

数字资源受网络状态的影响故障频发,图书馆作为高校信息文化的传播中心,做好资源的保障工作意义重大.文中设计实现一种基于爬虫技术的数字资源自动监测系统.该系统利用日志文件替代数据库软件,降低软件复杂度;利用爬虫技术及正则解析,获取监测URL的状态值和数据库定制名称,监测结果通过邮件自动发送给所有管理员.实验结果表明,该系统具有较好的扩展性能,在任何网络坏境和IP地址下,均能准确进行检测,对运行环境要求低,稳定性好,无需人工操作.

关键词：数字资源、自动监测、网络爬虫、日志文件、正则解析、检测软件

所属期刊栏目：41

分类号：TN919-34;G250

资助基金：国家重点研发计划:工业产品创新优化设计服务社区开发与应用2016YFB0201800;陕西省教育厅人文社科专项研究计划:智能网络机器人在图书馆信息服务领域的应用研究18jk0320

在线出版日期：2019-08-01（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：132-135