基于房产交易网站的数据获取与在线工具开发

摘要：

房屋交易网站提供了每个交易房产的详细信息,自动获取这些数据并进行在线分析可以帮助人们更好地分析一个地区房产情况,更有利于决策.开发网页分析工具是分析大数据发展的趋势,其具有更少的代码,同时拥有不亚于应用程序的功能实现数据采集与数据分析的实时对接,使得其成为工具开发的新宠.房产交易网站在线工具利用Python语言结合Scrapy、ArcPy等第三方模块开发,可自动提取房产数据,并针对不同数据类型,对某一地区的房产进行空间分布分析和规律监测等.以链家网、安居客两个房产交易网站为例,从中获取上海市的新房、二手房等房产数据,通过统计图表的形式显示上海市房产的空间分布情况,房价涨幅,各地区房产数量分布比例等,实现用户对大数据的进一步分析认识.

关键词：房屋交易网站、网络爬虫、地理编码、ArcPy

所属期刊栏目：27

分类号：TP39(计算技术、计算机技术)

资助基金：国家自然科学基金资助项目41001270;上海市自然科学基金项目14ZR1412200;闵行区中小企业技术创新计划项目2014MH011

在线出版日期：2017-06-30（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：154-159