學Python也有段時間了,目前學到了Python的類。個人感覺Python的類不應稱之爲類,而應稱之爲數據類型,只是數據類型而已!只是數據類型而已!只是數據類型而已!重要的事情說三篇。
據書上說一個.py(常量、全局變量、函數、數據類型)文件爲一個模塊,那麼就有了一種感覺:常量、全局變量、函數、數據類型是同一“級別的”。在此不多說了,收回自己的心思來看爬蟲吧!
1、進百合網官網
單擊“搜索”、單擊“基本搜索”,這時會跳向另一個頁面,該頁面爲登錄頁面(如圖):
2、找到login.js,具體步驟:F12、F5、network、js(如圖):
3、找登錄時的異步請求,該請求在login.js中(如圖):
4、單擊“基本搜索”,會得到兩個異步請求
1:獲取160個id (如圖):
2:根據id得到用戶詳細信息,爲json數據(如圖):
說了這麼多,該上代碼了(總共261行):
在此我就分享一下 所需要用到的模塊
- requests
- time
- pymssql
想獲取源碼,可以關注微信公衆號: