1. 程式人生 > >億牛雲API優質代理使用中出現的問題

億牛雲API優質代理使用中出現的問題

相同 名單 固定 修改ip 一段 ie瀏覽器 false 加ip 失效

(1) 代理提取失敗
停止程序訪問,直接使用IE瀏覽器訪問代理API,截圖看看錯誤提示:
如果頁面訪問失敗
註意API鏈接是否復制正確;爬蟲服務器是否有防火墻禁止網絡訪問;服務器是Linux提取api,是需要轉義,&符號前面要加\
頁面訪問成功,返回錯誤信息,需要看看錯誤信息內容
您的IP: 125.69.47.134 沒在白名單( 125.69.44.227 222.209.8.0 )中
原因:ip白名單不對,需要添加,註意看看對方服務器IP是不是電信或聯通的IP
修改IP白名單太頻繁
原因:1、ip白名單不對,需要添加,註意看看對方服務器IP是不是電信或聯通的IP,同時註意對方是不是開啟了IP自動更新選項,如果對方有多個網絡出口,就會導致ip自動更新頻繁。
False,沒有獲取到任何代理,速率超過限制
原因:一條代理API鏈接只能按照指定時間間隔進行訪問,註意程序是不是有多個線程訪問或一個服務器下有多個軟件運行,超出了代理鏈接提取速度,請用瀏覽器訪問代理API鏈接,看看中文提示錯誤描述。如果服務器每秒請求超過一次,會被判斷為DDOS***行為,直接黑名單處理,停止該行為一段時間後會自動恢復訪問許可。
(2) 代理提取之後,代理不能訪問或訪問失敗率很高
原因:提取和使用代理IP的機器是不是都綁定了IP白名單,註意看看對方服務器IP是不是電信或聯通的IP;
(3) 代理能訪問,偶爾出現訪問失敗或提取失敗
原因:註意看看對方服務器IP是不是電信或聯通的IP,同時詢問對方是不是多個IP白名單的情況下,開啟了IP自動更新出現了沖突;對方是否控制了代理IP的使用時間,超出了2-10分鐘,導致IP失效。
(4) 代理能訪問,出現大量429
原因:要求對方控制每個代理IP的請求數,最好一個代理IP一個線程,避免出現阻塞,同時建議客戶增加IP提取量
(5) 代理能訪問,出現大量403、504或503
原因:爬蟲程序的采集行為被網站標識並拒絕服務,求對方控制每個代理IP的請求數,並且增加IP提取量。
(6) 提取的代理IP都是相同IP
原因:部分地區為保證網絡速度、降低網絡延遲,提供IP隧道代理,該代理通過固定IP+隨機端口,在一個時間點上隨機分配一個外網IP(又稱:公網IP),因此統計代理IP的重復率是不準確的。

億牛雲API優質代理使用中出現的問題