【原】python接口自动化29-requests超时重试方法

前言

“由于连接方在一段时间后没有正确答复或连接的主机没有反应，连接尝试失败”,这是经常遇到的问题
requests.exceptions.ConnectionError: HTTPSConnectionPool(host=’www.github.com’, port=443): Max retries exceeded with url: / (Caused by NewConnectionError('<urllib3.connection.verifiedhttpsconnection object="" at="" 0x0000020f06524ac8="">: Failed to establish a new connection: [WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应，连接尝试失败。’,))
一般出现这个问题的原因是：host=’www.github.com’ 主机地址没连上，使用 requests 发请求时，有些网站服务器不稳定，特别是国外的网站，经常会出现连接失败情况。
连接失败后，有时候会抛出上面异常，有时候会一直卡住，进入假死状态，没响应，也不会结束。</urllib3.connection.verifiedhttpsconnection>

timeout

requests 发请求的时候会有个默认的超时时间，这个时间在20秒左右

import requests s = requests.session() url = "https://www.github.com/" r = s.request("GET", url=url) print(r.text)

连不上服务器会出现异常：requests.exceptions.ConnectionError

requests.exceptions.ConnectionError: HTTPSConnectionPool(host='www.github.com', port=443): Max retries exceeded with url: / (Caused by NewConnectionError('<urllib3.connection.VerifiedHTTPSConnection object at 0x0000020F06524AC8>: Failed to establish a new connection: [WinError 10060] 由于连接方在一段时间后没有正确答复或连接的主机没有反应，连接尝试失败。',))

如果请求一直没响应，进入假死状态，可以加个 timeout 超时时间，达到这个请求超时时间就结束,如 15 秒超时。

import requests s = requests.session() url = "https://www.github.com/" r = s.request("GET", url=url, timeout=15) print(r.text)

这样抛出的异常是:requests.exceptions.ConnectTimeout

raise ConnectTimeout(e, request=request) requests.exceptions.ConnectTimeout: HTTPSConnectionPool(host='www.github.com', port=443): Max retries exceeded with url: / (Caused by ConnectTimeoutError(<urllib3.connection.VerifiedHTTPSConnection object at 0x000001CF6D2A4A20>, 'Connection to www.github.com timed out. (connect timeout=15)'))

失败重试 max_retries

Requests 自带了一个传输适配器，也就是 HTTPAdapter。这个适配器使用了强大的 urllib3，为 Requests 提供了默认的 HTTP 和 HTTPS 交互。
每当 Session 被初始化，就会有适配器附着在 Session 上，其中一个供 HTTP 使用，另一个供 HTTPS 使用。

import requests from requests.adapters import HTTPAdapter s = requests.session() # max_retries=3 重试3次 s.mount('http://', HTTPAdapter(max_retries=3)) s.mount('https://', HTTPAdapter(max_retries=3)) url = "https://www.github.com/" r = s.request("GET", url=url, timeout=15) print(r.text)