python3 爬取百合網的女人們和男人們

學Python也有段時間了,目前學到了Python的類。個人感覺Python的類不應稱之爲類,而應稱之爲數據類型,只是數據類型而已!只是數據類型而已!只是數據類型而已!重要的事情說三篇。

據書上說一個.py(常量、全局變量、函數、數據類型)文件爲一個模塊,那麼就有了一種感覺:常量、全局變量、函數、數據類型是同一“級別的”。在此不多說了,收回自己的心思來看爬蟲吧!

1、進百合網官網

單擊“搜索”、單擊“基本搜索”,這時會跳向另一個頁面,該頁面爲登錄頁面(如圖):

2、找到login.js,具體步驟:F12、F5、network、js(如圖):

3、找登錄時的異步請求,該請求在login.js中(如圖):

4、單擊“基本搜索”,會得到兩個異步請求

1:獲取160個id (如圖):

2:根據id得到用戶詳細信息,爲json數據(如圖):

說了這麼多,該上代碼了(總共261行):

在此我就分享一下 所需要用到的模塊

  • requests
  • time
  • pymssql

想獲取源碼,可以關注微信公衆號:

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章