python爬虫——随机生成headers

最新推荐文章于 2025-01-21 17:02:16 发布

lizhiyuanbest

最新推荐文章于 2025-01-21 17:02:16 发布

阅读量3.5k

点赞数 3

分类专栏： Python

本文链接：https://blog.csdn.net/lizhiyuanbest/article/details/104996810

版权

Python 专栏收录该内容

36 篇文章

订阅专栏

https://www.jianshu.com/p/fc3c885fe026
在编写爬虫进行网页数据，有时候需要添加请求头，去找并添加很麻烦。下面介绍一个python下非常好用的伪装请求头的库：fake-useragent，具体使用说明如下：
安装： pip install fake-useragent
获取各个浏览器的headers：

from fake_useragent import UserAgent
ua=UserAgent()                      #实例化
print(ua.chrome)                    #获取谷歌浏览器的headers，每次打印结果是不一样的
#请求头就可以写成
headers={"User-Agent":ua.random}