经济学家也要学点网络爬虫技术——漫谈爬虫技术与经济数据收集
1 经济学实证研究中的的网络数据以及网络数据的特点
随着科技的发展,人们正面临信息爆炸.2010年,零售巨头沃尔玛每小时都要处理100多万笔交易,为数据库大概上传2,500兆数据,相当于美国国会图书馆存书数的167倍.①可想而之,这个世界上数据量多到难以想象,而且还在不断地快速增长.
与此同时,经济学家的研究越来越离不开数据的支持.以2012年第1期的《经济研究》为例,11篇学术文章,除了一篇纯理论研究的文章外,其余10篇均引用了各种数据.打开中国经济学工作者常常访问的论坛,也会发现里面有大量的信息是关于数据的下载、交换和交易的.为此经济学家不得不投入大量资金来购买各种数据库.
经济学家、网络数据、爬虫技术、技术与经济、经济学实证研究、数据库、国会图书馆、学术文章、信息爆炸、零售巨头、理论研究、经济研究、交易、沃尔玛、数据量、工作者、资金、中国、增长、美国
G3 ;TU9
2014-08-06(万方平台首次上网日期,不代表论文的发表时间)
共7页
94-100