基于Python的TarBase V8网站爬虫设计与实现

摘要：

在数据爆炸的时代,人们通过搜索引擎从网上来查找自己所需要的数据.但并不是所有的网站都提供所需要的数据下载.网络爬虫技术可以将查找到的数据抓取下来,以供研究人员研究使用.Scrapy是使用Python语言开发开源的爬虫框架.该文将利用Scrapy框架和Python语言设计和实现一个TarBase V8网站爬虫,对其网站miRNA靶基因数据进行获取以及存储.

关键词：Scrapy、网络爬虫、搜索引擎、信息检索、miRNA靶基因

所属期刊栏目：16

分类号：TP391(计算技术、计算机技术)

资助基金：湖南省教育厅科研课题项目编号:17C1377

在线出版日期：2020-08-13（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：20-22,31