Python中的Request请求重试机制
更新时间:2024年06月27日 09:59:41 作者:老虎爱代码
这篇文章主要介绍了Python中的Request请求重试机制,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
Python请求重连
很多时候因为网络错误,或者请求阻塞导致我们一次请求没有生效,那么有个错误重试机制的话方便我们容错
问题描述
提示:
解决重连机制的话,一般我们先把请求做一次封装
所有的reques都通过我们的Request基类去请求
这样方面我们统一处理
put_request是我封装的一个put统一请求方法:
def put_request(url,data):
i=0
while i<3:
try:
res=r.put(url=url,data=data,verify=False,timeout=3.07)
if check_res(res):
i+=1
else:
return res
except Exception as e:
log.debug(str(e))
i+=1
res='error'
return res
优化
提示:
后来发现Request有自己的重试机制,Transport Adapters,
https://requests.readthedocs.io/en/latest/user/advanced/#transport-adapters

import requests
from requests.adapters import HTTPAdapter
r = requests.Session()
#将适配器挂载到session上面
r.mount('http://', HTTPAdapter(max_retries=3))
r.mount('https://', HTTPAdapter(max_retries=3))
总结
以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。
相关文章
python-opencv-cv2.threshold()二值化函数的使用
这篇文章主要介绍了python-opencv-cv2.threshold()二值化函数的使用,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教2022-11-11
Scrapy的Pipeline之处理CPU密集型或阻塞型操作详解
这篇文章主要介绍了Scrapy的Pipeline之处理CPU密集型或阻塞型操作详解,Twisted框架的reactor适合于处理短的、非阻塞的操作,Twisted提供了线程池来在其他的线程而不是主线程(Twisted的reactor线程)中执行慢的操作,需要的朋友可以参考下2023-10-10
requests库post方法如何传params类型的参数(最新推荐)
在使用requests库的post方法时,params类型的参数用于在URL中作为查询字符串传递,与data或json参数不同,后者是放在请求体中的,params参数接受一个字典或包含键值对的序列,本文给大家介绍requests库post方法怎么传params类型的参数,感兴趣的朋友一起看看吧2025-03-03


最新评论