爬蟲代理加強版、標準版產品問題解答

1、什麼是爬蟲代理(加強版、標準版)
“爬蟲代理IP”通過固定雲代理服務地址,建立專線網絡鏈接,代理平臺自動實現毫秒級代理IP切換,保證了網絡穩定性和速度,避免爬蟲客戶在代理IP策略優化上投入精力。
2、爬蟲代理加強版和標準版有什麼區別
(1)標準版的IP分佈於全國10多個,適合於中小型網站採集
(2)加強版的IP分佈於全國90多個地區,IP量大適合於大型網站或對IP數量、質量要求很高的採集任務。

3、爬蟲代理加強版,標準版的用戶認證是什麼意思
用戶認證(通過請求頭實現用戶名和密碼認證)
通過用戶名和密碼的形式進行身份認證,該認證信息最終會轉換爲『Proxy-Authorization』協議頭跟隨請求一起發出,同時支持通過『Authorization』協議頭進行隧道身份驗證。如用戶認證錯誤,系統會返回407 Unauthorized。
用戶認證模式情況下,如果需要使用“代理提取鏈接(代理提取API)”取代理地址信息,依然需要設置相應的IP白名單,該IP白名單僅對“代理提取鏈接(代理提取API)”生效。
4、爬蟲代理加強版,標準版如果請求過多會返回什麼
如果開通的HTTP\HTTPS代理,系統返回429 Too Many Requests;如果開通的Socket5代理,系統會主動對TCP延遲降速,或者直接拒絕超出部分的TCP請求。這兩種處理方式都不會對爬蟲的運行產生影響,爬蟲會根據返回結果自動重新發起請求,這是HTTP\HTTPS和Socket5的標準應答模式。

5、爬蟲代理加強版、標準版同一隧道使用的代理會重複嗎

系統會自動做去重和隨機處理,一般情況下代理IP不會重複出現, 但如果池中的 IP 在當天都被隧道使用過,爲了保證代理的可用性,平臺會爲隧道隨機分配一個可用代理。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章