首页 > 其他 > 详细

requests快速构造请求头的方法

时间:2020-01-30 17:28:46      阅读:122      评论:0      收藏:0      [点我收藏+]

技术分享图片

 

 上图请求头内容,内容多不说,也不确认哪些数据是必须的,网上找到一个懒办法

快速一键生成 Python 爬虫请求头

实战演练

抓取网站:https://developer.mozilla.org...

网站在线转换

1,Chrome 打开开发者选项( f12 )---> network 选项卡 ---> 刷新页面,获取请求 ---> 找到页面信息对应的请求 (通过请求的名称、后缀和 response 内容来判断)

技术分享图片

 

 2,右键,copy ---> copy as cURL (bash),注意不是【copy as cURL (cmd)】

技术分享图片

 

 3,打开网站,https://curl.trillworks.com/,粘贴 cURL (bash) 到左边 curl command,右边会自动出 Python 代码

技术分享图片

 

 4,生成代码如下图

技术分享图片

 

5,print ( response.text ) 就可以直接打印网页源代码啦!

 

Postman

1,下载 postman ( Chrome 也有个 postman 的插件,操作应该差不多)

2,打开 postman,弹出的界面可以直接关掉

技术分享图片

3,import --> paste raw text,在 Chrome 里复制 curl (bash),粘贴到下面的对话框里,点击 import 按钮

技术分享图片

4,点击 send,模拟网络请求,下方可查看源代码

技术分享图片

5,确保源代码正常后,点击 code

技术分享图片

6,左上角可以选择编程语言,右上角复制到剪贴板

技术分享图片

大功告成!

requests快速构造请求头的方法

原文:https://www.cnblogs.com/becks/p/12243014.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!