提供代码运行过程的相关咨询服务,确保代码成功运行。
本文代码已同步更新到,下面公众号。请大家关注公众号 【 Python人生之技术实践】, 近期将推出 豆瓣、知乎、微博、网易云音乐、拉勾网、知网的爬虫教程,代码已经完成,在整理阶段谢谢。
爬虫方式:
1 爬取某个话题的所有的评论
2 爬取某个博主的所有微博的评论
3 爬取某个博主的所有粉丝的用户信息,位置信息
微博评论爬虫难点:
获取max_id 和 max_id_type 参数
以“迪丽热巴的微博”为案例,爬取热巴的所有微博,所有微博评论,所有粉丝的用户信息,并对所有的粉丝进行位置分析,在地图上显示粉丝分布。