有些站點在初次訪問的時候會有cookie驗證,會拒絕請求,因爲代碼使用htmlunit或者selenium瀏覽器的時候每一次都是全新啓動所以沒有cookie 這個時候重新刷新一下界面可以解決大部分問題:)
注 : 不要忘了開啓cookie支持(如果默認關閉或者沒開的情況下)
注:這個是我的個人經驗,並沒有深究,爬蟲也沒有很niubility 歡迎交流 指導 3Q
有些站點在初次訪問的時候會有cookie驗證,會拒絕請求,因爲代碼使用htmlunit或者selenium瀏覽器的時候每一次都是全新啓動所以沒有cookie 這個時候重新刷新一下界面可以解決大部分問題:)
注 : 不要忘了開啓cookie支持(如果默認關閉或者沒開的情況下)
注:這個是我的個人經驗,並沒有深究,爬蟲也沒有很niubility 歡迎交流 指導 3Q