欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

【PythonPlanet】爬虫_设置随机的UserAgent

程序员文章站 2022-05-09 10:04:31
...

为了避免因为使用同一头部信息导致网站服务器拒绝你的请求,可以使用fake-useragent库实现每次请求带不同的http头部信息。

代码如下:

# 先在终端安装第三方库,pip install fake-useragent
from fake_useragent import UserAgent
ua = UserAgent(verify_ssl = False)

# 模拟不同的浏览器
print(f'Chrome浏览器:{ua.chrome}')
# print(ua.safari)
# print(ua.ie)

# 随机返回头部信息,推荐使用
print(f'随机浏览器:{ua.random}')