一、新建隐身窗口
在打开隐身窗口的时候,第一次请求某个网站是没有携带cookie的,和代码请求一个网站一样,不携带cookie。这样就能够尽可能的理解代码请求某个网站的结果;除非数据是通过js加载出来的,不然爬虫请求到的数据和浏览器请求的数据大部分时候都是相同的。
二、Chrome中Network功能
1、Perserve log
默认情况下,页面发生跳转之后,之前的请求url地址等信息都会消失,勾选“perserve log”后之前的请求都会被保留。
2、Filter过滤
在url地址很多时,可以输入url进行过滤
3、观察特点种类的请求
默认是选择all,即观察所有种类请求。
其他选项:
原文:https://www.cnblogs.com/chjxbt/p/11365360.html