失眠网,内容丰富有趣,生活中的好帮手!
失眠网 > Python用requests完成最简单的爬虫

Python用requests完成最简单的爬虫

时间:2024-05-13 21:43:41

相关推荐

Python用requests完成最简单的爬虫

初识爬虫,需要有一定的网络知识

import requests #没有的话就直接下载,pip install requests

url = "你想爬取的网页"headers ={"User-Agent":"在你浏览器用开发者模式查看NetWork然后刷新网页再在Headers中找寻"}

如图 ,格式要注意,User-Agent中间的是冒号,

User-Agent也可直接网页搜到。

# 获取响应体rep = requests.get(url=url,headers=headers)html = rep.text # 拿到了网页

之后就需要对网页数据处理了

如果觉得《Python用requests完成最简单的爬虫》对你有帮助,请点赞、收藏,并留下你的观点哦!

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。