Python requests设置代理教程：Session对象与IP池的最佳实践

国外IP代理推荐：
IPIPGO|全球住宅代理IP（>>>点击注册免费测试<<<）
国内IP代理推荐：
天启|全国240+城市代理IP（>>>点击注册免费测试<<<）

为什么需要Session对象搭配代理IP？

很多刚接触Python网络请求的朋友，会直接使用requests.get()或requests.post()这样的单次请求。这在简单场景下没问题，但一旦涉及到需要保持会话状态（如登录态、Cookie）或高频次访问时，这种方式就显得效率低下且难以管理。

Session对象可以理解为一个“会话容器”。它会在多次请求间自动保持Cookie，复用底层的TCP连接，从而提升速度。当我们需要为大量请求配置代理ip时，将代理设置与Session对象结合，只需配置一次，后续所有通过该Session发起的请求都会自动使用代理，避免了重复代码，管理起来也清晰得多。

为单个Session配置静态代理IP

这是最基础的用法，适用于当你有一个稳定可靠的长期代理IP时。ipipgo提供的静态住宅IP就非常适合这种场景，一个IP可以持续使用，稳定性极高。

配置方法非常简单，只需在创建Session对象后，为其proxies属性指定一个字典即可。字典的键是协议（如'HTTP'、'https'），值是代理服务器的地址。

import requests

 创建一个Session对象
session = requests.Session()

 配置代理（以ipipgo的代理服务器为例，替换为你的实际代理信息）
proxies = {
    'http': 'http://username:password@proxy.ipipgo.com:port',
    'https': 'https://username:password@proxy.ipipgo.com:port'
}
session.proxies.update(proxies)

 之后所有使用该session的请求都会自动通过代理IP发出
try:
    response = session.get('http://httpbin.org/ip')
    print(response.json())
except requests.exceptions.ProxyError as e:
    print("代理连接错误:", e)

这种方式的好处是一劳永逸，但缺点也同样明显：所有请求都通过同一个IP发出，如果目标网站有反爬虫机制，很容易因IP访问过于频繁而被限制。

进阶玩法：为每个请求动态分配代理IP（IP池）

为了解决单一IP易被封锁的问题，IP池的概念应运而生。简单说，IP池就是一组可用的代理IP集合。每次发起请求时，程序会从池中随机选取一个IP来使用，从而将请求流量分散到大量不同的IP上，极大降低了被识别的风险。

ipipgo提供的动态住宅IP池服务，拥有海量全球家庭住宅IP资源，IP自动更换，完美契合这种高阶需求。下面我们看看如何实现。

第一步：构建你的本地IP池

你需要从ipipgo获取一批可用的代理IP，并以列表等形式存储在程序中。在实际项目中，这个列表可能来自一个API接口或配置文件。

 模拟一个从ipipgo获取的代理IP列表
ip_pool = [
    {'http': 'http://user1:pass1@proxy1.ipipgo.com:8080', 'https': 'https://user1:pass1@proxy1.ipipgo.com:8080'},
    {'http': 'http://user1:pass2@proxy2.ipipgo.com:8080', 'https': 'https://user1:pass2@proxy2.ipipgo.com:8080'},
    {'http': 'http://user1:pass3@proxy3.ipipgo.com:8080', 'https': 'https://user1:pass3@proxy3.ipipgo.com:8080'},
     ... 更多IP
]

第二步：让Session每次请求随机使用IP池中的IP

我们可以通过自定义Session的send方法，或在每次请求前动态修改Session的proxies属性来实现。这里展示后一种更直观的方法。

import random

session = requests.Session()

 定义一个函数，用于为当前session随机选择一个代理
def set_random_proxy(session, proxy_list):
    proxy = random.choice(proxy_list)
    session.proxies.update(proxy)
    return proxy   返回当前使用的代理，便于调试

 在每次重要请求前，切换代理IP
set_random_proxy(session, ip_pool)
response1 = session.get('http://httpbin.org/ip')
print("第一次请求IP:", response1.json())

 下一次请求前，可以再次切换
set_random_proxy(session, ip_pool)
response2 = session.get('http://httpbin.org/ip')
print("第二次请求IP:", response2.json())

通过这种方式，你的程序就具备了IP自动轮换的能力，模拟了来自世界不同地区真实用户的访问行为，非常适合数据采集、自动化测试等场景。

实战技巧：异常处理与IP有效性检测

IP池中的IP并非永远有效，网络波动或代理服务器故障都可能导致请求失败。一个健壮的程序必须包含异常处理机制。

一个常见的策略是重试机制：当某个代理IP请求失败时，自动从IP池中剔除该IP，并换一个新IP重试请求。

max_retries = 3   最大重试次数

for i in range(max_retries):
    try:
         设置随机代理
        current_proxy = set_random_proxy(session, ip_pool)
        response = session.get('你的目标网址', timeout=10)   设置超时时间
         如果请求成功，跳出循环
        if response.status_code == 200:
            print("请求成功！")
            break
    except (requests.exceptions.ProxyError, requests.exceptions.ConnectTimeout, requests.exceptions.ConnectionError) as e:
        print(f"第{i+1}次请求失败，错误: {e}")
         从IP池中移除当前失效的代理
        if current_proxy in ip_pool:
            ip_pool.remove(current_proxy)
            print("已移除失效代理，剩余IP数量:", len(ip_pool))
        if len(ip_pool) == 0:
            print("IP池已耗尽！")
            break
    except requests.exceptions.RequestException as e:
        print("其他请求错误:", e)
        break

这套组合拳能确保你的程序在遇到局部IP失效时，依然能稳定运行，大大提升了程序的鲁棒性。

常见问题QA

Q1: 我测试代理IP时发现连接超时或失败，可能是什么原因？

A1: 最常见的原因有几个：1）代理服务器地址、端口、用户名或密码填写错误；2）代理服务器本身网络不稳定或已宕机；3）本地网络环境限制了代理连接。建议先用浏览器等工具测试代理IP本身是否可用。使用像ipipgo这样提供高可用性代理服务的供应商，可以从源头上减少此类问题。

Q2: 使用IP池后，为什么感觉速度有时会变慢？

A2: 这是正常现象。IP池中的IP分布在不同的地理位置和网络环境中，其延迟和速度必然有差异。动态轮换IP时，如果换到了一个网络条件稍差的节点，速度就会波动。追求高稳定性和低延迟时，可以考虑使用ipipgo的静态住宅IP；而追求高匿名性和抗封锁能力时，则选择动态IP池，需要在速度和匿名性之间做出权衡。

Q3: 如何判断我的代理IP是否真的生效了？

A3: 一个简单可靠的方法是请求一些可以返回你当前公网IP的公共服务，例如http://httpbin.org/ip或http://api.ipify.org。查看返回的IP地址是否与你设置的代理IP一致，即可判断代理是否成功生效。

Q4: Session对象和代理IP结合，主要优势在哪里？

A4: 主要优势有三点：效率高（TCP连接复用）、管理方便（代理配置一次，多处生效）、功能强大（易于实现IP池、自动重试等复杂逻辑）。它将网络请求中的“连接管理”和“代理管理”完美地统一了起来。

国外IP代理推荐：
IPIPGO|全球住宅代理IP（>>>点击注册免费测试<<<）
国内ip代理推荐：
天启|全国240+城市代理IP（>>>点击注册免费测试<<<）