User-Agent用户代理,简称UA 。是识别用户操作系统,CPU,浏览器的一串字符串。在用爬虫爬取数据的时候,频繁的更换UA可以尽可能的避免触发反爬机制。 fake-useragent可以频繁的更换UA,对爬虫用户很友好。
1.安装fake-useragent
pip install fake-useragent
2.使用fake-useragent
fake-useragent的用法
原文:https://www.cnblogs.com/zhuweidong/p/14289761.html