提到上海,不得不提上海的高房价,最近一篇上海各市辖区均价的文章引起了我的注意,6月上海各辖区甚至各小区的房价到底处于一个什么样的水平呢?
打开安居客网站的二手房首页,房源信息中的房价、小区地址、市辖区、村镇名称是分析所需数据,通过认真观察网站页面结构,爬虫思路定为从安居客二手房首页(http:shanghai.anjuke.comsale
)进入到各市辖区网页,再进入村镇结构网页(滨江、长桥等我称之为村镇名称),然后依次爬取各村镇房源信息中的房价、地址相关信息。?
url_qx用于获取上海各市辖区的名称以便拼接出各市辖区对应的网址(这个网址规律和村镇结构网址的规律一样),url_qx3在市辖区网址的基础之上进一步获取所有村镇结构对应的信息(包含名称),url_qx4
3、说完了市辖区的均价,我很好奇单价最贵的小区top10谁会上榜(在处理过程中为防止商家造假、错误值或极端值,删除只出现过一次的小区),发现徐汇区湖南路是土豪小区集中地,黄浦区出现了一次,静安区一次都没出现