首页 > 编程语言 > 详细

python爬虫----handler和opener

时间:2019-02-05 23:26:28      阅读:292      评论:0      收藏:0      [点我收藏+]
  • opener是 urllib2.OpenerDirector 的实例,我们之前一直都在使用的urlopen,它是一个特殊的opener(也就是模块帮我们构建好的)
  • 但是基本的urlopen不支持代理,cookie等其他HTTP/HTTPS高级功能,所以要支持这些功能:
      • 使用相关的Handler处理器来创建特定功能的处理器对象
      • 然后通过urllib2.build_opener()方法使用这些处理器对象,创建自定义opener()对象
      • 使用自定义的opener对象,调用open()发送请求

python爬虫----handler和opener

原文:https://www.cnblogs.com/yellowhat/p/10353284.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!