原创 億牛雲優質代理的每秒提取和分發模式
爲了給服務器集羣或多線程軟件提供更快的API響應速度，平臺提供分發模式。在代理API鏈接後面加上&dist=[數量]，可以實現每秒快速多次請求，每次獲取相應數量的代理IP。例如：API&dist=1，表示每次提取1個IP。需要注意的問題是：
2019-03-22 13:30:34
原创 億牛雲爬蟲代理標準版和加強版的區別
標準版、加強版的區別（1）標準版的IP分佈於全國10多個，適合於中小型網站採集（2）加強版的IP分佈於全國90多個地區，IP量大適合於大型網站或對IP數量、質量要求很高的採集任務。、標準版和加強版的兩種IP切換模式有什麼區別所有模式在IP有
2019-03-21 13:29:29
原创 億牛雲爬蟲代理的用戶認證模式
用戶密碼認證¶通過用戶名和密碼的形式進行身份認證，該認證信息最終會轉換爲Proxy-Authorization 協議頭跟隨請求一起發出，同時支持通過Authorization協議頭進行隧道身份驗證。 如用戶認證錯誤，系統會返回401 Una
2019-03-20 13:29:47
1
原创 億牛雲爬蟲代理設置自主切換IP的方案
1、自主切換IP¶該模式適合一些需要登陸、Cookie緩存處理等爬蟲需要精確控制IP切換時機的業務。 爬蟲程序可以通過設置HTTP頭Proxy-Tunnel: 隨機數， 當隨機數相同時,訪問目標網站的代理IP相同。 例如 需要登錄,獲取數據
2019-03-19 13:29:46
原创 億牛雲API代理如何修改白名單的方案
IP白名單修改方式手動修改登錄後臺，查看“當前代理”，點擊“修改白名單”，即刻生效。自動修改（1） 登錄後臺，啓用“自動更新ip”，系統將自動綁定計算機的外網ip（60分鐘內可以更換一次；多個IP白名單訪問會導致相互衝突，禁止啓用）。（2）
2019-03-16 13:28:49
原创 使用億牛雲爬蟲代理常見問題的解決方案
（1） 代理使用失敗讓對方截圖看看代理代碼，代理信息是否提取配置正確。重點注意必須使用代理域名，不能是代理服務器IP。要求對方複製demo，然後加上ua隨機優化，按照所開代理的請求數，按照300毫秒爲單位進行管理，運行程序後統計錯誤信息和h
2019-03-15 13:29:51
原创 億牛雲API優質代理使用中出現的問題
（1） 代理提取失敗停止程序訪問，直接使用IE瀏覽器訪問代理API，截圖看看錯誤提示：如果頁面訪問失敗注意API鏈接是否複製正確；爬蟲服務器是否有防火牆禁止網絡訪問；服務器是Linux提取api，是需要轉義，&符號前面要加\頁面訪問成功，返
2019-03-14 13:23:48
原创 使用億牛雲爬蟲代理失敗的原因
http狀態碼407原因：代理認證信息失敗，讓對方嚴格按照demo配置代理信息http狀態碼429原因：請求超過代理限制，嚴格按照所開代理的請求數，按照300毫秒爲單位進行管理。如果限制之後，既然大量429，需要優化爬蟲策略，應該是目標網站
2019-03-13 13:21:55
原创 爬蟲如何設置億牛雲爬蟲代理
#! -- encoding:utf-8 --import requestsimport randomimport requests.adapters # 要訪問的目標頁面 targetUrlList = [ "https://ht
2019-03-12 13:20:25
原创 Selenium使用億牛雲爬蟲代理的方案
from selenium import webdriverimport stringimport zipfile # 代理服務器 proxyHost = "t.16yun.cn" proxyPort = "31111" # 代理隧道驗證
2019-03-09 13:18:19
原创 爬蟲代理有哪些區分
我們知道，代理ip按照匿名程度來分可以分爲透明代理、普匿代理和高匿代理，透明代理會暴露自己的真實IP，普匿代理不會暴露自己的真實IP，但會暴露使用了代理IP，高匿代理IP什麼都不會暴露，比較安全，所以一直以來，高匿代理IP是首選。億牛雲的爬
2019-03-08 13:16:17
原创 API代理連接提取格式
API鏈接提取格式API就是url鏈接，用戶的程序需要支持API的讀取，定期從url中獲取代理IP的相關信息，格式如下： API鏈接提取格式API就是url鏈接，用戶的程序需要支持API的讀取，定期從url中獲取代理IP的相關信息，格式如下
2019-03-07 13:22:10
原创 nodejs使用爬蟲代理的方案
/ 要訪問的目標頁面const targetUrl = "http://httpbin.org/ip"; const urlParsed = url.parse(targetUrl); // 代理服務器const proxyHost = "
2019-03-06 13:17:23
原创 網絡爬蟲代理
我們知道，代理ip按照匿名程度來分可以分爲透明代理、普匿代理和高匿代理，透明代理會暴露自己的真實IP，普匿代理不會暴露自己的真實IP，但會暴露使用了代理IP，高匿代理IP什麼都不會暴露，比較安全，所以一直以來，高匿代理IP是首選。億牛雲的爬
2019-03-05 13:21:29
原创 JAVA使用爬蟲代理的方案之一
Connectionimport java.io.ByteArrayOutputStream;import java.io.InputStream;import java.net.Authenticator;import java.net.
2019-03-03 13:16:00