网络请求代理转发怎么配置？Python/Node.js全语言实操教程

国外IP代理推荐：
IPIPGO|全球住宅代理IP（>>>点击注册免费测试<<<）
国内IP代理推荐：
天启|全国240+城市代理IP（>>>点击注册免费测试<<<）

代理IP到底是个啥？

简单来说，代理ip就像个中间人。正常情况下，你的电脑（客户端）直接向目标网站（服务器）发送请求，网站看到的是你的真实IP地址。而用了代理IP之后，流程就变了：你的请求先发给代理服务器，再由代理服务器转发给目标网站。网站看到的是代理服务器的IP，而不是你的。

这么做有几个实实在在的好处：

• 隐藏真实IP：保护你的网络隐私，避免被一些网站直接追踪。
• 应对访问限制：某些服务器会对同一IP的频繁访问进行限制，通过更换代理IP可以绕过这个限制。
• 提升某些场景下的效率：比如在数据采集时，使用多个代理IP可以并发请求，加快速度。

市面上代理IP服务很多，比如专业的ipipgo，它提供全球各地的住宅IP资源，IP池大，稳定性好，非常适合各种网络请求转发的需求。

准备工作：获取可靠的代理IP

在写代码之前，你得先有能用的代理IP。这里以ipipgo为例，它支持多种协议，像HTTP、HTTPS、socks5都行，你可以根据项目需求灵活选择。通常，服务商会给你一个代理服务器地址、端口、用户名和密码，格式类似这样：

• 服务器地址：gateway.ipipgo.com
• 端口：30001
• 用户名：你的用户名
• 密码：你的密码

拿到这些信息，就等于拿到了“中间人”的地址和通行证，接下来就可以在代码里配置了。

Python实战：给请求挂上代理

Python里最常用的发请求的库是requests，给它配置代理非常简单。

1. 安装必要的库

如果还没安装requests，先用pip安装一下：

pip install requests

2. 代码配置（以HTTP代理为例）

假设你从ipipgo获取的是http代理，那么可以这样设置：

import requests

 从ipipgo获取的代理信息
proxy_host = 'gateway.ipipgo.com'
proxy_port = '30001'
proxy_username = 'your_username'
proxy_password = 'your_password'

 组合成requests库需要的代理格式
proxies = {
    'http': f'http://{proxy_username}:{proxy_password}@{proxy_host}:{proxy_port}',
    'https': f'http://{proxy_username}:{proxy_password}@{proxy_host}:{proxy_port}'   注意这里，如果代理服务器支持，也可以是https
}

 目标网址
url = 'http://httpbin.org/ip'

try:
    response = requests.get(url, proxies=proxies, timeout=10)
    print(response.text)   这里会显示代理服务器的IP，而不是你本机的IP
except requests.exceptions.RequestException as e:
    print(f"请求出错: {e}")

关键点：proxies字典里的http和https字段都要填上。代码里的用户名密码是直接拼在URL里的，这是一种常见的认证方式。

3. 处理socks5代理

如果你的ipipgo代理是SOCKS5协议，需要先安装requests[socks]：

pip install requests[socks]

然后代码稍作修改：

proxies = {
    'http': f'Socks5://{proxy_username}:{proxy_password}@{proxy_host}:{proxy_port}',
    'https': f'socks5://{proxy_username}:{proxy_password}@{proxy_host}:{proxy_port}'
}

就是这么简单，几行代码就让你的网络请求通过代理IP转发出去了。

Node.js实战：用代理发送请求

在Node.js环境中，我们常用axios或node-fetch来发请求。这里以axios为例，同时介绍如何使用https-proxy-agent或socks-proxy-agent来处理代理。

1. 安装依赖包

npm install axios https-proxy-agent socks-proxy-agent

2. 配置HTTP/HTTPS代理

如果使用HTTP代理，可以这样做：

const axios = require('axios');
const HttpsProxyAgent = require('https-proxy-agent');

// ipipgo代理信息
const proxyOptions = `http://${encodeURIComponent('your_username')}:${encodeURIComponent('your_password')}@gateway.ipipgo.com:30001`;
const agent = new HttpsProxyAgent(proxyOptions);

const url = 'http://httpbin.org/ip';

axios.get(url, { httpsAgent: agent, httpAgent: agent })
  .then(response => {
    console.log(response.data);
  })
  .catch(error => {
    console.error('请求失败:', error.message);
  });

注意：这里对用户名和密码进行了encodeURIComponent编码，防止特殊字符导致的问题。

3. 配置SOCKS5代理

对于Socks5代理，使用socks-proxy-agent：

const SocksProxyAgent = require('socks-proxy-agent');

const proxyOptions = `socks5://${encodeURIComponent('your_username')}:${encodeURIComponent('your_password')}@gateway.ipipgo.com:30001`;
const agent = new SocksProxyAgent(proxyOptions);

// 后续使用axios的代码和上面一样

Node.js的配置看起来比Python稍微复杂一点，但核心思路是一样的：创建一个代理agent，然后在发请求时把这个agent配置进去。

进阶技巧：处理IP轮转与会话保持

有时候，一个任务需要用到多个代理IP，或者需要保持一个会话（Session）。

Python会话保持与IP轮转

使用requests.Session()可以轻松保持会话，同时结合代理ip池实现轮转：

import requests
from itertools import cycle   用于循环IP列表

 假设你有一个从ipipgo获取的IP列表
proxy_list = [
    'http://user1:pass1@gateway1.ipipgo.com:30001',
    'http://user2:pass2@gateway2.ipipgo.com:30001',
     ... 更多代理IP
]
proxy_pool = cycle(proxy_list)   创建一个循环池

session = requests.Session()

 为这次会话随机选一个代理，或者按顺序取
session.proxies = {'http': next(proxy_pool), 'https': next(proxy_pool)}

 之后用session发的所有请求都会自动使用这个代理
response = session.get('http://httpbin.org/ip')

Node.js实现类似功能

在Node.js中，你可以为不同的请求创建不同的agent实例来实现IP轮转。

const axios = require('axios');
const HttpsProxyAgent = require('https-proxy-agent');

const proxyList = [
    'http://user1:pass1@gateway1.ipipgo.com:30001',
    'http://user2:pass2@gateway2.ipipgo.com:30001',
];

function getRandomProxyAgent() {
    const proxyUrl = proxyList[Math.floor(Math.random()  proxyList.length)];
    return new HttpsProxyAgent(proxyUrl);
}

// 每次请求使用随机代理
axios.get('http://httpbin.org/ip', { httpsAgent: getRandomProxyAgent(), httpAgent: getRandomProxyAgent() })
  .then(response => console.log(response.data));

利用ipipgo提供的大量IP资源，你可以轻松构建自己的IP池，有效避免因单一IP请求过快而被限制。

常见问题QA

Q1: 代码运行后报错，提示代理连接失败，可能是什么原因？

A1: 最常见的原因有几个：

• 代理服务器地址、端口、用户名或密码填写错误。请仔细核对从ipipgo获取的信息。
• 代理IP已过期或失效。检查一下你的代理IP是否仍在有效期内。
• 本地网络环境限制了代理连接。检查防火墙或网络设置。

Q2: 如何测试代理IP是否配置成功？

A2: 一个简单的方法是访问 http://httpbin.org/ip 或 https://API.ipify.org?format=json 这类显示你当前IP的网站。如果返回的ip地址是你代理服务器的IP，而不是你的本地IP，那就说明配置成功了。

Q3: 为什么配置了代理后，请求速度变慢了？

A3: 这是正常现象。因为你的请求需要先绕到代理服务器，再由代理服务器去访问目标，多了一个中间环节，自然会增加一些延迟。速度取决于代理服务器的网络质量、与目标服务器的距离等因素。选择像ipipgo这样拥有高质量全球网络节点的服务商，可以在很大程度上保证速度和稳定性。

Q4: 我的项目需要高并发请求，有什么建议？

A4: 高并发场景下，强烈建议使用代理IP池。你可以从ipipgo这类服务商获取大量代理IP，然后编写管理逻辑，让程序自动从池中选取可用IP进行请求。这样可以有效分散请求压力，避免对单个IP造成过大负担而被封禁。

国外IP代理推荐：
IPIPGO|全球住宅代理IP（>>>点击注册免费测试<<<）
国内ip代理推荐：
天启|全国240+城市代理IP（>>>点击注册免费测试<<<）