首页 > 编程语言 > 详细

Python 爬虫常见的坑和解决方法

时间:2018-01-06 17:05:51      阅读:250      评论:0      收藏:0      [点我收藏+]

1.请求时出现HTTP Error 403: Forbidden

headers = {‘User-Agent‘:‘Mozilla/5.0 (Windows NT 6.1; WOW64; rv:23.0) Gecko/20100101 Firefox/23.0‘}  

req = urllib.request.Request(url=url, headers=headers)  

urllib.request.urlopen(req).read()  

详细:https://www.2cto.com/kf/201309/242273.html

 

2.保存html内容时出现Python UnicodeEncodeError: ‘gbk‘ codec can‘t encode character

f = open("out.html","w")  

换成

f = open("out.html","w",encoding=‘utf-8‘)  

详细:http://www.jb51.net/article/64816.htm

 

Python 爬虫常见的坑和解决方法

原文:https://www.cnblogs.com/cxscode/p/8214578.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!