gpt4 book ai didi

python - requests/urllib3 下载图像时重试警告

转载 作者:行者123 更新时间:2023-12-01 03:52:03 25 4
gpt4 key购买 nike

我正在使用以下代码顺序下载一些图像,但收到大量警告:重试消息。值得注意的是,图像 url 每次都会导致这种变化,有时甚至不会发生。

session = requests.Session()
session.keep_alive = False
adapter = requests.adapters.HTTPAdapter(pool_connections=100, pool_maxsize=100, max_retries=3)
session.mount("http://", adapter)
session.mount("https://", adapter)

response = session.get(image_url, headers=headers, allow_redirects=True, timeout=20)

这会导致警告

2016-06-28 07:16:47 [requests.packages.urllib3.connectionpool] WARNING: Retrying (Retry(total=2, connect=None, read=None, redirect=None)) after connection broken by 'ReadTimeoutError("HTTPConnectionPool(host='s-media-cache-ak0.pinimg.com', port=80): Read timed out. (read timeout=20)",)': /564x/4d/75/78/4d7578cf80d146b9d2b597f8678c7b31.jpg

我该如何修复/抑制这些问题?我的日志中出现大量重试警告是没有意义的。我已经检查了请求源代码,但我不想禁用所有警告:

log.warning("Retrying (%r) after connection "
"broken by '%r': %s", retries, err, url)

最佳答案

原来我试图禁用错误的东西。我只是有待办事项

import logging
logging.getLogger('requests.packages.urllib3.connectionpool').setLevel(logging.CRITICAL)

关于python - requests/urllib3 下载图像时重试警告,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38071633/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com