个人中心
文章发布
退出
作者热门文章
- ubuntu12.04环境下使用kvm ioctl接口实现最简单的虚拟机
- Ubuntu 通过无线网络安装Ubuntu Server启动系统后连接无线网络的方法
- 在Ubuntu上搭建网桥的方法
- ubuntu 虚拟机上网方式及相关配置详解
24
4
CFSDN坚持开源创造价值，我们致力于搭建一个资源共享平台，让每一个IT人在这里找到属于你的精彩世界.
这篇CFSDN的博客文章python3 解决requests出错重试的问题由作者收集整理，如果你对这篇文章有兴趣，记得点赞哟.
对python3下的requests使用并不是很熟练，今天稍微用了下，请求几次下来后发现出现连接超时的异常，上网查了下，找到了一个还算中肯的解决方法.
retrying是python的一个自带的重试包 。
|
1
|
from
retrying
import
retry
|
retrying 这个包的用法原理就是在你不知道那段代码块是否会发生异常，若发生异常，可以再次执行该段的代码块，如果没有发生异常，那么就继续执行往下执行代码块 。
以前你的代码可能是这样写的:
|
1
2
3
4
5
6
7
8
9
|
def
get_html(url):
pass
def
log_error(url):
pass
url
=
""
try
:
get_page(url)
except
:
log_error(url)
|
也有可能是这样子写的:
|
1
2
3
4
5
6
7
8
9
10
11
|
# 请求超过十次就放弃
attempts
=
0
success
=
False
while
attempts <
10
and
not
success:
try
:
get_html(url)
success
=
True
except
:
attempts
+
=
1
if
attempts
=
=
10
:
break
|
使用 retrying 的写法:
|
1
2
3
4
5
6
7
8
9
10
|
import
random
from
retrying
import
retry
@retry
()
def
do_something_unreliable():
if
random.randint(
0
,
10
) >
1
:
raise
IOError(
"Broken sauce, everything is hosed!!!111one"
)
else
:
return
"Awesome sauce!"
result
=
do_something_unreliable()
print
（result）
|
上面的是简单的用法，你可以试下，下面是一些可选参数的使用方式.
|
1
|
stop_max_attempt_number
|
用来设定最大的尝试次数，超过该次数就停止重试 。
|
1
|
stop_max_delay
|
超过时间段，函数就不会再执行了 。
|
1
|
wait_random_min和wait_random_max
|
用随机的方式产生两次retrying之间的停留时间 。
补充：python中Requests的重试机制 。
|
1
2
3
4
5
6
7
8
|
import
requests
from
requests.adapters
import
HTTPAdapter
s
=
requests.Session()
# 重试次数为3
s.mount(
'http://'
, HTTPAdapter(max_retries
=
3
))
s.mount(
'https://'
, HTTPAdapter(max_retries
=
3
))
# 超时时间为5s
s.get(
'http://example.com'
, timeout
=
5
)
|
在wiki当中对指数退避算法的介绍是:
In a variety of computer networks, binary exponential backoff or truncated binary exponential backoff refers to an algorithm used to space out repeated retransmissions of the same block of data, often as part of network congestion avoidance. 。
翻译成中文的意思大概是“在各种的计算机网络中，二进制指数后退或是截断的二进制指数后退使用于一种隔离同一数据块重复传输的算法，常常做为网络避免冲突的一部分” 。
比如说在我们的服务调用过程中发生了调用失败，系统要对失败的资源进行重试，那么这个重试的时间如何把握，使用指数退避算法我们可以在某一范围内随机对失败的资源发起重试，并且随着失败次数的增加长，重试时间也会随着指数的增加而增加.
当然，指数退避算法并没有人上面说的那么简单，想具体了解的可以具体wiki上的介绍 。
当系统每次调用失败的时候，我们都会产生一个新的集合，集合的内容是0~2n-1，n代表调用失败的次数 。
第一次失败 集合为 0，1 。
第二次失败 集合为 0，1，2，3 。
第三次失败 集合为 0，1，2，3，4，5，6，7 。
在集合中随机选出一个值记为R，下次重试时间就是R*基本退避时间(对应在指数退避算法中争用期) 当然，为了防止系统无限的重试下去，我们会指数重新的最大次数 。
使用指数退避算法，可以防止连续的失败，从某方面讲也可以减轻失败服务的压力，试想一下，如果一个服务提供者的服务在某一时间发生了异常、超时或是网络抖动，那么频繁的重试所得到的结果也大致都是失败。这样的频繁的重试不仅没有效果，反而还会增服务的负担.
接入三方支付服务，在三方支付提供的接入接口规范中，服务方交易结束结果通知和商户主动查询交易结果都用到重发机制 。
在app应用中，很多场景会遇到轮询一类的问题,轮询对于app性能和电量的消耗都过大.
以上为个人经验，希望能给大家一个参考，也希望大家多多支持我。如有错误或未考虑完全的地方，望不吝赐教.
原文链接：https://blog.csdn.net/xudailong_blog/article/details/82469380 。
最后此篇关于python3 解决requests出错重试的问题的文章就讲到这里了,如果你想了解更多关于python3 解决requests出错重试的问题的内容请搜索CFSDN的文章或继续浏览相关文章，希望大家以后支持我的博客！ 。
24
4
0
@Cacheable在同一类中方法调用无效 上述图片中，同一个类中genLiveBullets()方法调用同类中的queryLiveByRoom()方法，这样即便标识了Cacheable标签，
目录 @Transaction注解导致动态切换更改数据库失效 使用场景 遇到问题 解决 @Transaction
@RequestBody不能class类型匹配 在首次第一次尝试使用@RequestBody注解 开始加载字符串使用post提交（貌似只能post），加Json数据格式传输的时候，
目录 @Autowired注入static接口问题 @Autowired自动注入普通service很方便 但是如果注入static修饰的serv
目录 @RequestBody部分属性丢失 问题描述 JavaBean实现 Controller实现
目录 解决@PathVariable参数接收不完整的问题 今天遇到的问题是： 解决办法： @PathVariable接受的参
这几天在项目里面发现我使用@Transactional注解事务之后，抛了异常居然不回滚。后来终于找到了原因。 如果你也出现了这种情况，可以从下面开始排查。 1、特性 先来了解一下@Trans
概述： ? 1
场景： 在处理定时任务时，由于这几个方法都是静态方法，在aop的切面中使用@Around注解，进行监控方法调用是否有异常。 发现aop没有生效。 代码如下：
最近做项目的时候 用户提出要上传大图片 一张图片有可能十几兆 本来用的第三方的上传控件 有限制图片上传大小的设置 以前设置的是2M&nb
我已经实现了这个SCIM reference code在我们的应用程序中。 我实现的代码确实通过了此postman link中存在的所有用户测试集合。 。我的 SCIM Api 也被 Azure 接受
我一直对“然后”不被等待的行为感到困扰，我明白其原因。然而，我仍然需要绕过它。这是我的用例。 doWork(family) { return doWork1(family)
我正在尝试查找 channel 中的消息是否仍然存在，但是，我不确定如何解决 promise ，查看其他答案和文档，我可以看到它可能是通过函数实现的，但我是不完全确定如何去做。我希望能在这方面获得一些
我有以下情况: 同一工作区中的 2 个 Eclipse 项目:Apa 和 Bepa(为简洁起见，使用化名)。 Apa 项目引用(包括)Bepa 项目。 我在 Bepa 有一个类 X，具有公共(publ
这个问题已经有答案了: Why am I getting a NoClassDefFoundError in Java? (31 个回答) 已关闭 6 年前。 我正在努力学习 spring。所以我输入
我正在写一个小游戏，屏幕上有许多圆圈在移动。 我在两个线程中管理圈子，如下所示: public void run() { int stepCount = 0; int dx;
我在使用 Sympy 求解方程时遇到问题。当我运行代码时，例如: 打印(校正(10)) 我希望它打印一个数字 f。相反，它给我错误:执行中止。 def correction(r): from
好吧，我制作的每个页面都有这个问题。我不确定我做错了什么，但我所有的页面都不适用于所有分辨率。可能是因为我使用的是宽屏？大声笑我不确定，但在小于宽屏分辨率的情况下，它永远不会看起来正确。它的某些部分你
我正在尝试像这样进行一个非常简单的文化 srting 检查 if(culture.ToUpper() == "ES-ES" || "IT-IT") { //do something } else
Closed. This question is off-topic. It is not currently accepting answers. Learn more。 想改进这个问题吗？Upda
我是一名优秀的程序员,十分优秀！