欢迎光临散文网 会员登陆 & 注册

【Python爬虫】糗事百科数据段子采集

2021-10-20 19:10 作者:松鼠爱吃饼干  | 我要投稿

知识点

1.爬虫基本步骤
2.requests模块
3.parsel模块
4.xpath数据解析方法
5.分页功能

爬虫基本步骤:

  1. 获取网页地址 (糗事百科的段子的地址)

  2. 发送请求

  3. 数据解析

  4. 保存 本地


爬虫代码

导入所需模块


1.获取网页地址




2.发送请求


3.数据解析


4.保存数据


运行代码,得到数据


【Python爬虫】糗事百科数据段子采集的评论 (共 条)

分享到微博请遵守国家法律