欢迎光临散文网 会员登陆 & 注册

批量爬取一家公司的多页信息

2023-03-31 09:58 作者:寒冰之雪  | 我要投稿

import requests
headers={'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:109.0) Gecko/20100101 Firefox/111.0'}
ye=1
count=0
for i in range(0,10):
    url='https://search.jd.com/Search?keyword=计算机二级&page='+str(ye)
    res=requests.get(url,headers=headers)
    ye+=2
    count+=1
print('爬取了%d页'%count)


https://www.wolai.com/hbzx/etGJYcg12ifGKPCt22ry1A



批量爬取一家公司的多页信息的评论 (共 条)

分享到微博请遵守国家法律