本文重点

1. 系统分析网页性质

2. 结构化的数据解析

3. csv数据保存

环境介绍

• python 3.8

• pycharm 专业版 >>> 激活码

模块使用

• requests >>> pip install requests

• parsel >>> pip install parsel

• csv

爬虫代码实现步骤: 发送请求 >>> 获取数据 >>> 解析数据 >>> 保存数据

导入模块

发送请求, 对于房源列表页发送请求

获取数据

解析数据

保存数据

数据可视化

导入所需模块

读取数据

各城区二手房数量北京市地图

各城区二手房数量-平均价格柱状图

散点图

房屋朝向占比

装修情况/有无电梯玫瑰图（组合图）

二手房楼层分布柱状缩放图

房屋面积分布纵向柱状图