Python中使用requests库处理超时与重试

在Python中，requests库是一个广泛使用的HTTP客户端库，用于发送HTTP请求。然而，在发送请求时，我们可能会遇到网络延迟、服务器无响应或其他原因导致的请求超时。此外，即使请求没有超时，也可能因为各种原因（如服务器暂时不可用）而失败。为了处理这些问题，我们可以采取两种策略：设置超时时间和实现请求重试机制。

设置超时时间

requests库允许我们为请求设置超时时间。如果请求在指定的时间内没有得到响应，就会抛出一个requests.exceptions.Timeout异常。以下是一个设置超时时间的示例：

import requests
try:
    response = requests.get('https://example.com', timeout=5)  # 设置超时时间为5秒
    response.raise_for_status()  # 如果请求返回的状态码不是200，将抛出HTTPError异常
except requests.exceptions.Timeout:
    print('请求超时！')
except requests.exceptions.HTTPError as http_err:
    print(f'HTTP错误: {http_err}')
except Exception as err:
    print(f'发生错误: {err}')

在上面的示例中，我们为requests.get()方法设置了一个超时时间参数timeout=5，表示如果请求在5秒内没有得到响应，就会抛出Timeout异常。

实现请求重试机制

当请求失败时，除了打印错误消息外，我们可能还希望尝试重新发送请求。为此，我们可以实现一个简单的请求重试机制。以下是一个使用retrying库实现请求重试机制的示例：

import requests
from retrying import retry
@retry(stop_max_attempt_number=3, wait_fixed=2000)  # 最多重试3次，每次间隔2秒
def send_request():
    try:
        response = requests.get('https://example.com', timeout=5)
        response.raise_for_status()
        return response.text
    except (requests.exceptions.Timeout, requests.exceptions.HTTPError):
        pass  # 如果请求超时或返回非200状态码，则重试
try:
    result = send_request()
    print(result)
except Exception as err:
    print(f'请求失败: {err}')

在上面的示例中，我们使用了retrying库提供的retry装饰器来装饰send_request()函数。这样，当send_request()函数抛出异常时，retry装饰器会捕获该异常，并根据指定的重试策略重新调用send_request()函数。在这个示例中，我们设置了最多重试3次，每次间隔2秒。

需要注意的是，虽然重试机制可以提高请求的成功率，但也可能导致请求被无限期地重试，尤其是在遇到无法解决的问题（如服务器宕机）时。因此，在实际应用中，我们需要根据具体情况设置合适的重试策略，并考虑在重试次数达到上限后采取其他措施（如通知管理员或返回错误消息）。

总之，通过设置超时时间和实现请求重试机制，我们可以更好地处理requests库在发送HTTP请求时可能遇到的超时和失败问题。这将有助于提高程序的健壮性和用户体验。