Python網絡爬蟲(1)- 對CSDN主頁進行搜索,得到自己想要的內容

# 自己寫的一個第一個爬蟲項目,輸入關鍵字,在CSDN主頁進行搜索,得到有關的鏈接

# 這個爬蟲項目比較簡單,因爲不需要提交任何數據,只是簡單的下載頁面

# 這個爬蟲項目並不簡單,因爲我是完全自己搭建了一個爬蟲框架,可以說是比較完善了

# 編寫項目的時候就完全考慮到了可擴展性,大多采用文件型,將種子url放到seeds.txt中,這就是爬蟲的開始URL

# 此項目還有待進一步完善,並沒有對爬蟲的深度進行限制

# 項目源碼下載地址,我的個人githubhttps://github.com/Anokoro/Spider-CSDN

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章