一:抓包分析概述
抓包分析,就是将网络传输发送与接收的数据包进行抓取的操作,做爬虫时,数据并不一定在HTML源码中,很可能隐藏在一些网址中,所以我们要抓取某些数据进行抓包,分析出对应数据所隐藏在的网址,然后分析规律并爬取。
二:使用fiddler工具进行抓包分析
(1)设置fiddler:
这个窗口用来浏览所抓到的网址:
当你选择某个网址之后,在右边显示具体的信息:
下面的黑色文本框可以用来输入fiddler的一些命令。
(2)浏览器的使用--火狐
首先配置火狐浏览器:
a: 打开浏览器
b:点击右边的
c:选择“选项”
d:选择“高级”
e:点击“网络”
f:点击“设置”
fiddler抓包需要使用代理,因为fiddler是用代理服务器来进行工作的。比如我们现在要访问互联网中的一个服务器,那么我们如果直接这样访问过去,那么我们的数据包就会直接这样传输过去,我们也看不见。那么我们可以将fiddler作为代理服务器,之后首先是不是我们所有的数据需要通过fiddler才能够发送给我们的互联网中的服务器,然后互联网中的服务器的相应信息也都是通过fiddler然后传给我们本地,这个时候就说明了一点,这个时候fiddler、作为一个中间的服务器,就会有所有的数据包,有了这些数据包,我们就会非常的好做了,我们就可以在fiddler中看到所有的数据包了,这个就是抓包的原理,它作为代理服务器的方式去截获一些信息。
g:点击“手动配置代理”,按照如下信息填写:127.0.0.1是本地服务器默认端口8888
h:点击“确定”
那么现在我们在火狐浏览器上的操作就可以在fiddler中进行获取了。
三:fiddler中的指令
在黑框中输入clear指令可以清空。