首页 > 编程语言 > 详细

python爬虫之如何随机更换User-Agent

时间:2018-08-09 00:06:45      阅读:160      评论:0      收藏:0      [点我收藏+]

这是python里面的一个useragent池,非常好用!具体怎么用呢?

首先,安装fake-useragent

    pip install fake-useragent

然后,使用方法

 

from fake_useragent import UserAgent

ua = UserAgent()
headers = {‘User-Agent‘:ua.random}

注意,有些网站可能会根据user-agent来封IP,也就是说他们会根据同一个IP下,如果是很多个不同user-agent在访问,那么,此时,他们就会判定为爬虫

python爬虫之如何随机更换User-Agent

原文:https://www.cnblogs.com/ittop/p/9446391.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!