Max retries exceeded with url錯誤
阿新 • • 發佈:2018-08-25
操作 ada one exc ext ber ring exce als
進行requests庫學習的時候,報Max retries exceeded with url錯誤,網上查詢說是,用下面這個解決方法沒用,後來關閉了fiddler後發現就可以了,可能fiddler開的連接數太多了
http連接太多沒有關閉導致的。
解決辦法:
1、增加重試連接次數
requests.adapters.DEFAULT_RETRIES = 5
- 1
2、關閉多余的連接
requests使用了urllib3庫,默認的http connection是keep-alive的,requests設置False關閉。
操作方法
s = requests.session()
s.keep_alive = False
import requests,json,unittest
def send_req(url,method,data=None):
if method==‘GET‘:
requests.adapters.DEFAULT_RETRIES = 5
s = requests.session()
s.keep_alive = False
res=requests.get(url=url).json()
return json.dumps(res,indent=2)
else:
res=requests.post(url=url,data=data)
return res.json()
url=r‘https://www.baidu.com/home/xman/data/tipspluslist?indextype=manht&_req_seqid=0xe84d39f7000079b2&asyn=1&t=1535105478702&sid=26524_1442_21097_26921_22159‘
res=send_req(url,‘GET‘)
Max retries exceeded with url錯誤