Python 中设置请求的最大重试次数示例代码

 更新时间:2023年06月07日 10:48:25   作者:迹忆客  
本篇文章介绍了为什么我们会收到错误消息,指出超出了最大重试次数,以及我们如何在 Python 中为请求设置 max_retries,本文通过示例代码给大家介绍的非常详细,需要的朋友参考下吧

本篇文章介绍了为什么我们会收到错误消息,指出超出了最大重试次数,以及我们如何在 Python 中为请求设置 max_retries。 如果服务器上的负载导致此错误,它还会为我们提供提示。

Python中设置请求max_retries的错误,的原因和解决方案

在继续查看如何在 Python 中为请求设置 max_retries 之前,让我们先解决一些问题。

  • 首先,如果您的 URL 不正确,就会发生此错误。 因此,您需要检查您请求的 URL 是否有效。
  • 此错误也可能由于互联网连接而发生,因此请确保您没有遇到所有此类问题。
  • 当服务器过载时,我们也会收到此错误。 当服务器繁忙时,您可能会遇到此类错误。

这就是增加请求 URL 的重试次数的现象来帮助我们的地方。 因此,让我们了解如何做到这一点。 但是,首先,看看下面的代码。

示例代码:

import requests
# increass retries number
retries = #enter the number of retires you want to increase 
requests.adapters.DEFAULT_RETRIES = retries

这是您可以在 Python 中增加 URL 请求的重试次数的方法,但是如果由于服务器负载而出现此错误,您可以使用以下提示。

> python -m pip install requests

在 Python 中摆脱请求的 Set max_retries 的技巧

如果服务器上的负载导致此错误,您可以使用以下任何提示。

  • 禁用 keep_alive

您可以禁用会话的 keep_alive 功能。 下面的一段代码解释了如何做到这一点。

request_session = requests.session()
# disable keep_alive
request_session.keep_alive = False
request_session.get(your_url)
  • 使用超时

当服务器过载、繁忙或远离该位置时,这可能成为您遇到相同错误的原因。 为避免这种情况,您可以增加响应时间。

您可以使用来自服务器的 POST 和 GET 请求来完成此操作。 例如,看看下面的代码。

import requests
#the time in seconds in this example is increasing time by 5
req = requests.get(your_url, timeout=5)
req = requests.post(your_url, timeout=5)

您还可以在超时参数中使用元组。 第一个参数会增加构建时间,第二个参数会增加响应时间。 下面给出了代码示例。

req = requests.get(your_url, timeout=(3,6))
  • 设置 backoff_factor(延迟/睡眠)

backoff_factor 是请求用来初始设置网络连接的 urllib3 参数。

您还可以设置 backoff_factor 以增加每次尝试的尝试次数和休眠时间。

它将避免出现此错误。 有了这个,你就停止了这段代码并让它等待,直到它收到服务器的响应。

下图说明了 backoff_factor 如何在服务请求失败时延迟服务请求。

#you can set a backoff factor means delay/sleep time in each retry
import requests
from requests.adapters import HTTPAdapter
from requests.packages.urllib3.util.retry import Retry
#initailize the request session
request_session = requests.Session()
#initailizing retry object
#you can increase the number of total retires and sleep time of each retry
retries = Retry(total=3, backoff_factor=1)
adapter = HTTPAdapter(max_retries=retry)
request_session.mount('http://', adapter)
request_session.get(your_url)

根据 urllib3 文档,backoff_factor 是库用来确定重试之间的休眠间隔的基值。

例如,在每次不成功的连接尝试之后,urllib3 将休眠 {backoff_factor} * (2 (总重试次数 - 1)) 秒。

例如,如果 backoff_factor 设置为 0.01,sleep() 将在两次重试之间休眠 0.0s、0.2s、0.4s……。 默认情况下退避是不活动的(设置为 0)。

如果返回的状态码是500、502、503、504,会额外要求重试。 要更好地控制重试,您可以修改重试。

到此这篇关于如何在 Python 中设置请求的最大重试次数的文章就介绍到这了,更多相关 Python设置请求最大重试次数内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • 使用Python处理PDF文件的实践分享

    使用Python处理PDF文件的实践分享

    在现代数字化时代,PDF(Portable Document Format)文件已经成为广泛使用的电子文档格式,这篇文章主要为分享了Python处理PDF文件的简介与实践,需要的可以参考下
    2023-06-06
  • Python多进程multiprocessing、进程池用法实例分析

    Python多进程multiprocessing、进程池用法实例分析

    这篇文章主要介绍了Python多进程multiprocessing、进程池用法,结合实例形式分析了Python多进程multiprocessing、进程池相关概念、原理、用法及操作注意事项,需要的朋友可以参考下
    2020-03-03
  • Python走楼梯问题解决方法示例

    Python走楼梯问题解决方法示例

    这篇文章主要介绍了Python走楼梯问题解决方法,结合实例形式分析了Python基于递归与迭代思想解决走楼梯问题的相关操作技巧,需要的朋友可以参考下
    2018-07-07
  • 详解Python中的进程和线程

    详解Python中的进程和线程

    今天带大家学习的是关于Python的相关知识,文章围绕着Python中的进程和线程展开,文中有非常详细的介绍及代码示例,需要的朋友可以参考下
    2021-06-06
  • 离线部署Python环境的详细过程

    离线部署Python环境的详细过程

    本文主要介绍了离线部署Python环境的全过程,包括前置工作、部署Python、测试Python、配置环境和验证Python五个步骤,为读者提供了详细的操作指南,希望能对需要离线部署Python环境的读者提供帮助
    2024-10-10
  • Python批量修改文本文件内容的方法

    Python批量修改文本文件内容的方法

    这篇文章主要介绍了Python批量修改文本文件内容的方法的相关资料,需要的朋友可以参考下
    2016-04-04
  • Python 日期和时间处理教程之datetime 模块的使用示例详解

    Python 日期和时间处理教程之datetime 模块的使用示例详解

    Python 中的日期不是独立的数据类型,但我们可以导入一个名为 datetime 的模块来使用日期作为日期对象,这篇文章主要介绍了Python 日期和时间处理教程:datetime 模块的使用,需要的朋友可以参考下
    2023-10-10
  • 在Pycharm中将pyinstaller加入External Tools的方法

    在Pycharm中将pyinstaller加入External Tools的方法

    今天小编就为大家分享一篇在Pycharm中将pyinstaller加入External Tools的方法,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2019-01-01
  • 基于Python编写简单的网络测试工具

    基于Python编写简单的网络测试工具

    这篇文章主要为大家详细介绍了如何基于Python编写一个简单的网络测试工具,可以测试网络的下载速度,上传速度和延迟,感兴趣的可以了解下
    2025-02-02
  • Python英文文章词频统计(14份剑桥真题词频统计)

    Python英文文章词频统计(14份剑桥真题词频统计)

    这篇文章主要介绍了Python英文文章词频统计(14份剑桥真题词频统计),文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2019-10-10

最新评论