python爬虫-User-Agent的伪造

• 某些网站会识别python爬虫程序并阻断,通过构造User_Agent可以抵抗某些反爬虫机制
• 用fake-useragent这个库就能很好的实现

pycharm中安装步骤

产生随机的User-Agent

只需一行代码

from fake_useragent import UserAgent

ua = UserAgent()
print(ua.random)
print(ua.random)
print(ua.random)
print(ua.random)
print(ua.random)

会随机产生不同的User-agent