最近在學習爬蟲,跟着教學視頻爬取淘寶網商品列表時,發現不登錄不能直接爬蟲,故需要登錄後手動加上cookies,但網上查詢requests庫加cookie參數的方法對於初學者來說有點複雜,在嘗試後發現這樣可以成功傳遞cookies.
cookie = {'' : '網頁的cookie'}
r = requests.get(url, cookies=cookie)
最近在學習爬蟲,跟着教學視頻爬取淘寶網商品列表時,發現不登錄不能直接爬蟲,故需要登錄後手動加上cookies,但網上查詢requests庫加cookie參數的方法對於初學者來說有點複雜,在嘗試後發現這樣可以成功傳遞cookies.
cookie = {'' : '網頁的cookie'}
r = requests.get(url, cookies=cookie)