一:抓包分析概述
抓包分析,就是將網絡傳輸發送與接收的數據包進行抓取的操作,做爬蟲時,數據並不一定在HTML源碼中,很可能隱藏在一些網址中,所以我們要抓取某些數據進行抓包,分析出對應數據所隱藏在的網址,然後分析規律並爬取。
二:使用fiddler工具進行抓包分析
(1)設置fiddler:
這個窗口用來瀏覽所抓到的網址:
當你選擇某個網址之後,在右邊顯示具體的信息:
下面的黑色文本框可以用來輸入fiddler的一些命令。
(2)瀏覽器的使用--火狐
首先配置火狐瀏覽器:
a: 打開瀏覽器
b:點擊右邊的
c:選擇“選項”
d:選擇“高級”
e:點擊“網絡”
f:點擊“設置”
fiddler抓包需要使用代理,因爲fiddler是用代理服務器來進行工作的。比如我們現在要訪問互聯網中的一個服務器,那麼我們如果直接這樣訪問過去,那麼我們的數據包就會直接這樣傳輸過去,我們也看不見。那麼我們可以將fiddler作爲代理服務器,之後首先是不是我們所有的數據需要通過fiddler才能夠發送給我們的互聯網中的服務器,然後互聯網中的服務器的相應信息也都是通過fiddler然後傳給我們本地,這個時候就說明了一點,這個時候fiddler、作爲一箇中間的服務器,就會有所有的數據包,有了這些數據包,我們就會非常的好做了,我們就可以在fiddler中看到所有的數據包了,這個就是抓包的原理,它作爲代理服務器的方式去截獲一些信息。
g:點擊“手動配置代理”,按照如下信息填寫:127.0.0.1是本地服務器默認端口8888
h:點擊“確定”
那麼現在我們在火狐瀏覽器上的操作就可以在fiddler中進行獲取了。
三:fiddler中的指令
在黑框中輸入clear指令可以清空。