Python requests库使用代理：配置方法、实战应用与IP轮换

国外IP代理推荐：
IPIPGO|全球住宅代理IP（>>>点击注册免费测试<<<）
国内IP代理推荐：
天启|全国240+城市代理IP（>>>点击注册免费测试<<<）

当爬虫遇上反爬？试试用代理IP给requests穿马甲

最近老张在写爬虫时发现个怪现象：明明代码没毛病，但跑着跑着就报403错误。后来才明白是网站识别出了爬虫特征，这时候就该代理ip上场表演了。就像给requests套上无数件马甲，让服务器认不出你的真实身份。

手把手教你给requests戴面具

用requests挂代理简单到离谱，直接在请求参数里加个proxies字典就行。这里有个小坑要注意：代理协议必须和请求协议一致，别把HTTP代理用在HTTPs请求上。

import requests

 基础版代理配置
proxies = {
    "http": "http://username:password@123.45.67.89:8080",
    "https": "http://username:password@123.45.67.89:8080"
}
response = requests.get("http://example.com", proxies=proxies)

要是觉得每次都要输账号密码麻烦，可以试试像ipipgo这种支持API鉴权的服务商。他们家的动态住宅IP直接通过API获取，连认证字符串都不用自己拼：

 使用ipipgo的API直连模式
from ipipgo import get_proxy   假设的SDK方法

live_proxy = get_proxy(type='dynamic')
response = requests.get(url, proxies=live_proxy)

实战中的花式代理玩法

遇到特别难缠的网站时，可以祭出这三板斧：

举个栗子，用会话维持登录状态时：

session = requests.Session()
session.proxies.update({
    "http": "http://ipipgo_username:token@gateway.ipipgo.net:3111"
})
session.get("http://need-login.com")   自动携带代理

IP轮换的六脉神剑

想要实现自动换IP，别傻乎乎地写个sleep函数。推荐两种靠谱姿势：

 姿势1：从IP池随机选取
proxy_list = [ip1, ip2, ip3]   这里可以接入ipipgo的API获取最新IP
for url in url_list:
    current_proxy = {'https': random.choice(proxy_list)}
    requests.get(url, proxies=current_proxy)

 姿势2：定时切换机制
import time
from threading import Timer

def refresh_proxy():
    global current_proxy
    current_proxy = requests.get("https://api.ipipgo.com/get-proxy").json()
    Timer(300, refresh_proxy).start()   每5分钟换一次

用过ipipgo的动态住宅IP就知道，他们家支持按请求自动切换ip，根本不用自己写轮换逻辑，特别适合需要高频更换IP的场景。

小白必看的避坑指南

Q：代理明明配置对了，为啥还是连不上？
A：先检查代理协议是否匹配（http/https），再确认IP是否存活。推荐用ipipgo的实时可用性检测接口，避免手动测试的麻烦。

Q：代理速度像蜗牛怎么办？
A：选地理位置近的节点，比如目标网站在美国就用美西的IP。ipipgo的节点覆盖240+国家地区，找节点跟选外卖地址一样方便。

Q：怎么防止代理泄露真实IP？
A：双重验证代理是否生效：
1. 访问httpbin.org/ip查看当前IP
2. 用requests的event hook监控请求头

最后唠叨一句，选代理服务商要看准像ipipgo这种全协议支持的，别等要用SOCKS5协议时抓瞎。他们家静态动态IP都能用，住宅机房随意切，这才是专业玩家的选择。

国外IP代理推荐：
IPIPGO|全球住宅代理IP（>>>点击注册免费测试<<<）
国内ip代理推荐：
天启|全国240+城市代理IP（>>>点击注册免费测试<<<）