Python网络爬虫(1)- 对CSDN主页进行搜索,得到自己想要的内容

# 自己写的一个第一个爬虫项目,输入关键字,在CSDN主页进行搜索,得到有关的链接

# 这个爬虫项目比较简单,因为不需要提交任何数据,只是简单的下载页面

# 这个爬虫项目并不简单,因为我是完全自己搭建了一个爬虫框架,可以说是比较完善了

# 编写项目的时候就完全考虑到了可扩展性,大多采用文件型,将种子url放到seeds.txt中,这就是爬虫的开始URL

# 此项目还有待进一步完善,并没有对爬虫的深度进行限制

# 项目源码下载地址,我的个人githubhttps://github.com/Anokoro/Spider-CSDN

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章