黑马博学谷HTML&JS+前端基础48期(20220228新型面授) 直播课
我们只⽤⼏⾏代码,就完成了百度的抓取,并打印了⽹页的源代码,接下来,我们看⼀看我们获得的响应内容response到底是什么?利⽤type()⽅法来输出响应的类型。
print(type(response))
注意:
通常爬取网页,在构造http请求的时候,都需要加上一些额外信息,什么Useragent,cookie等之类的信息,或者添加代理服务器。往往这些都是一些必要的反爬机制。
requests库
简介:
我们只⽤⼏⾏代码,就完成了百度的抓取,并打印了⽹页的源代码,接下来,我们看⼀看我们获得的响应内容response到底是什么?利⽤type()⽅法来输出响应的类型。
print(type(response))
注意:
通常爬取网页,在构造http请求的时候,都需要加上一些额外信息,什么Useragent,cookie等之类的信息,或者添加代理服务器。往往这些都是一些必要的反爬机制。
requests库
简介: