Python请求库如何配置代理？requests模块详细设置教程

国外IP代理推荐：
IPIPGO|全球住宅代理IP（>>>点击注册免费测试<<<）
国内IP代理推荐：
天启|全国240+城市代理IP（>>>点击注册免费测试<<<）

代理IP是什么？为什么需要它？

简单来说，代理ip就像一个中间人。当你的电脑直接访问一个网站时，你的真实IP地址就暴露了。而使用代理IP后，你的请求会先发送到代理服务器，再由代理服务器去访问目标网站。这样，网站看到的是代理服务器的IP，而不是你的真实IP。

这样做有几个实际的好处：首先是保护隐私，隐藏自己的真实网络地址；在某些情况下，可以帮助你更稳定地访问网络资源，尤其是在网络请求频繁时，使用代理可以起到缓冲和分流的作用。对于开发者、数据采集人员或需要进行大量网络请求的用户来说，一个稳定可靠的代理IP服务至关重要。

准备工作：获取ipipgo代理IP信息

在开始写代码之前，你需要先准备好代理IP的连接信息。以ipipgo为例，其提供的代理IP信息通常包含以下几个部分：

• 服务器地址（IP或域名）
• 端口号
• 用户名（可选，根据认证方式）
• 密码（可选，根据认证方式）

ipipgo作为全球代理IP专业服务商，整合了240多个国家和地区的住宅IP资源，全协议支持。你可以在其用户中心找到为你分配的代理服务器详细信息。请确保这些信息准确无误，这是后续配置成功的基础。

requests模块设置代理的核心方法

Python的requests库是通过proxies参数来配置代理的。这个参数接受一个字典（dict），字典的键是协议类型（如'HTTP', 'https', 'ftp'），值是对应的代理服务器地址。

最基本的代理配置格式如下：

import requests

proxies = {
    'http': 'http://用户名:密码@代理服务器地址:端口',
    'https': 'https://用户名:密码@代理服务器地址:端口'
}

response = requests.get('你的目标网址', proxies=proxies)

详细配置步骤与代码示例

1. 无需认证的代理设置

如果你的代理IP不需要用户名和密码认证，设置最为简单。

import requests

proxies = {
    'http': 'http://123.45.67.89:8000',   替换为ipipgo提供的实际IP和端口
    'https': 'https://123.45.67.89:8000'
}

try:
    response = requests.get('http://httpbin.org/ip', proxies=proxies, timeout=10)
    print(response.json())   这里会显示代理服务器的IP，而非你的真实IP
except requests.exceptions.RequestException as e:
    print(f"请求出错: {e}")

2. 需要用户名密码认证的代理设置

这是更常见的情况，特别是使用高质量代理服务如ipipgo时。有两种写法：

方法一：在URL中直接拼接认证信息（推荐）

import requests

 将你的实际信息替换到这里
proxy_username = "你的ipipgo用户名"
proxy_password = "你的ipipgo密码"
proxy_ip = "123.45.67.89"   ipipgo代理服务器IP
proxy_port = "8000"   ipipgo代理服务器端口

proxy_url = f"http://{proxy_username}:{proxy_password}@{proxy_ip}:{proxy_port}"

proxies = {
    'http': proxy_url,
    'https': proxy_url.replace('http', 'https')   注意协议变化
}

response = requests.get('https://httpbin.org/ip', proxies=proxies)
print(response.text)

方法二：使用requests的auth参数

from requests.auth import HTTPProxyAuth

proxies = {
    'http': f'http://{proxy_ip}:{proxy_port}',
    'https': f'https://{proxy_ip}:{proxy_port}'
}
auth = HTTPProxyAuth(proxy_username, proxy_password)

response = requests.get('https://httpbin.org/ip', proxies=proxies, auth=auth)

两种方法效果相同，第一种在URL中拼接的方式更为常用和简洁。

3. 为特定协议设置代理

你可以选择性地只为某种协议（如HTTP）设置代理，而让其他协议（如HTTPS）直连。

proxies = {
    'http': 'http://用户:密码@服务器:端口',   只有HTTP请求走代理
     'https' 键不存在，表示HTTPS请求不使用代理，直接连接
}

实战技巧与最佳实践

1. 处理超时和异常

网络请求总是不稳定的，尤其是通过代理。一定要设置超时（timeout）并捕获异常。

try:
    response = requests.get('你的目标网址', proxies=proxies, timeout=(3.05, 10))
     timeout参数第一个值是连接超时，第二个值是读取超时
    response.raise_for_status()   如果状态码不是200，会抛出HTTPError异常
    print("请求成功！")
except requests.exceptions.ConnectTimeout:
    print("连接代理服务器超时，请检查网络或代理IP是否有效。")
except requests.exceptions.ProxyError as e:
    print(f"代理错误，可能是认证失败或代理服务器无响应: {e}")
except requests.exceptions.RequestException as e:
    print(f"请求过程中发生错误: {e}")

2. 会话（Session）持久化配置

如果你需要连续发送多个请求，使用Session对象可以提升效率，因为它会保持TCP连接，并可以统一设置代理、请求头等参数。

import requests

 创建一个会话对象
session = requests.Session()

 为整个会话设置代理
session.proxies.update({
    'http': 'http://用户:密码@服务器:端口',
    'https': 'https://用户:密码@服务器:端口'
})

 之后使用这个session发起的请求都会自动使用代理
response1 = session.get('网址1')
response2 = session.get('网址2')

 最后记得关闭会话
session.close()

这对于使用ipipgo这类服务进行大量数据采集任务时尤其有用，能减少连接建立的开销。

3. 验证代理是否生效

配置完成后，如何确认代理真的起作用了？一个简单的方法是访问一些可以显示你当前IP的网站。

test_urls = [
    'http://httpbin.org/ip',
    'https://httpbin.org/ip'
]

for url in test_urls:
    try:
        response = requests.get(url, proxies=proxies, timeout=5)
        ip_info = response.json()
        print(f"通过代理访问 {url} 看到的IP是: {ip_info['origin']}")
    except Exception as e:
        print(f"测试 {url} 时出错: {e}")

如果返回的ip地址是你代理服务器的IP，而非你的本地IP，那么就说明配置成功了。

常见问题与解决方案（QA）

Q1: 配置了代理，但请求失败，报错`ProxyError`，如何排查？

A1: 按照以下步骤排查： 1. 检查代理信息：IP地址、端口、用户名、密码是否完全正确，特别是特殊字符是否需要URL编码。 2. 测试代理连通性：尝试用`ping`命令或telnet工具测试代理服务器的IP和端口是否能连通。 3. 检查认证方式：确认你的代理服务（如ipipgo）要求的认证方式与你代码中实现的是否一致。 4. 代理服务器状态：联系代理服务商确认服务器是否正常运行。

Q2: 为什么有时候设置了代理，速度反而变慢了？

A2: 这很正常。网络请求需要经过代理服务器中转，增加了一个节点，理论上会比直连稍慢。速度取决于： - 代理服务器的性能、带宽和负载。 - 你的本地网络到代理服务器的网络质量。 - 代理服务器到目标网站的网络质量。 选择像ipipgo这样拥有高质量全球节点和充足带宽的服务商，可以有效减少延迟，保证速度的稳定性。

Q3: 我需要为每个请求都设置`proxies`参数吗？

A3: 不需要。如果你使用`requests.Session()`创建了一个会话对象，并在该会话上设置了代理，那么通过这个会话发出的所有请求都会自动使用代理，无需重复设置。这是管理代理配置的最佳实践。

Q4: 除了HTTP/HTTPS，requests库支持SOCKS代理吗？

A4: 原生requests库不支持SOCKS代理。但你可以安装额外的依赖包`requests[socks]`来获得支持。安装后，配置方式类似：

pip install requests[socks]

proxies = {
    'http': 'socks5://用户:密码@服务器:端口',
    'https': 'Socks5://用户:密码@服务器:端口'
}

值得一提的是，ipipgo全协议支持的特性意味着无论你需要HTTP、HTTPS还是SOCKS代理，都能得到满足。

总结

通过本文的详细介绍，你应该已经掌握了如何使用Python的requests库灵活地配置代理IP。关键在于正确构建`proxies`字典，并养成良好的编程习惯，如处理异常、设置超时、使用会话等。一个稳定可靠的代理IP服务是这一切的基础，ipipgo整合的全球住宅IP资源及其全协议支持能力，为各类网络应用场景提供了坚实保障。希望本教程能帮助你在实际项目中高效、稳定地使用代理IP。

国外IP代理推荐：
IPIPGO|全球住宅代理IP（>>>点击注册免费测试<<<）
国内ip代理推荐：
天启|全国240+城市代理IP（>>>点击注册免费测试<<<）