Python-Scrapy shell 帶頭部headers請求

scrapy shell -s USER_AGENT="" request_url 就可以完成帶頭部的請求添加,如請求簡書(不帶頭部請求時403錯誤)

scrapy shell -s USER_AGENT="Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:61.0) Gecko/20100101 Firefox/61.0" https://www.jianshu.com/recommendations/users?page=1

 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章