本文内容

1. 动态数据抓包演示

2. json数据解析

3. requests模块的使用

4. 保存csv

环境介绍

• python 3.8 解释器

• pycharm 编辑器

确定我们要爬取数据内容是什么?

美团网上搜索“按摩”，采集全部按摩店数据

通过开发者工具进行抓包分析，找到数据

代码实现步骤:

1. 发送请求, 对于店铺信息数据包url地址发送请求

2. 获取数据, 获取服务器返回的response响应数据

3. 解析数据, 提取我们想要的一些数据内容 (店铺信息)

4. 保存数据, 把相应的数据内容保存csv表格里面

5. 多页爬取数据内容

开始写代码，首先导入模块

发送请求, 对于店铺信息数据包url地址发送请求

确定请求的url地址 url?后面的内容，都是属于一个请求参数

解析数据，提取我们想要的一些数据内容 (店铺信息)

json字典数据 如何解析提取数据内容 字典取值 键值对取值, 根据冒号左边内容, 提取冒号右边内容

保存数据

翻页爬取