如何用HTTP代理IP做IP轮换？3种方式与配置步骤

IP轮换就是每次请求都换IP吗？

IP轮换不等于所有请求都必须更换出口IP，真正的判断标准是业务是否需要连续会话。

例如，网站采集器按页面逐条获取公开商品信息时，可以让每次请求使用不同出口。若任务包含登录态、连续表单或多步骤数据提交，频繁切换IP可能导致会话中断，这时应优先保持同一出口。

IP轮换前，先确认三个参数：

1. 轮换触发时机，是每次请求、每隔几次请求，还是异常后切换。
2. 会话是否需要保持，如果需要，就不能简单地每次请求换IP。
3. 代理池是否有健康检查，不能把连接失败的代理持续投入使用。

用HTTP代理网关自动轮换怎么做？

使用代理网关时，程序只需要连接一个HTTP代理地址，具体出口IP由网关按照配置自动切换。

请求链路通常是：

业务程序 → HTTP代理网关 → 代理IP池 → 目标站点

基础配置可以使用Python的requests库：

import requests

proxy = "http://用户名:密码@代理网关地址:端口"

proxies = {
    "http": proxy,
    "https": proxy
}

response = requests.get(
    "https://example.com",
    proxies=proxies,
    timeout=10
)

print(response.status_code)

如果代理服务支持“每次请求换IP”，可以重复使用同一个网关地址：

import requests
import time

proxy = "http://用户名:密码@代理网关地址:端口"

for page in range(1, 6):
    response = requests.get(
        f"https://example.com/list?page={page}",
        proxies={
            "http": proxy,
            "https": proxy
        },
        timeout=10
    )

    print(page, response.status_code)
    time.sleep(1)

这种方式的优点是接入代码较少，代理IP的提取、失效检测和出口切换由服务端处理。适合网站采集器、广告监测和舆情监测等需要持续发送大量公开数据请求的任务。

但要确认服务商的轮换规则。有些网关是每次请求切换，有些是连接级切换，还有些支持通过会话标识保持一段时间的固定出口。不能只看到“动态代理”几个字，就默认每次请求都会更换IP。

自己维护代理池怎么切换IP？

自己维护代理池时，程序需要在每次请求前选择代理，并记录代理的健康状态。

最简单的随机选择方式如下：

import random
import requests

proxy_list = [
    "http://用户名:密码@代理地址1:端口",
    "http://用户名:密码@代理地址2:端口",
    "http://用户名:密码@代理地址3:端口"
]

def fetch(url):
    proxy = random.choice(proxy_list)

    response = requests.get(
        url,
        proxies={
            "http": proxy,
            "https": proxy
        },
        timeout=10
    )

    return response

response = fetch("https://example.com")
print(response.status_code)

随机选择适合代理质量接近、请求量较小的测试任务。进入正式业务后，建议加入失败重试和代理暂时下线机制：

import random
import time
import requests

proxy_list = [
    "http://用户名:密码@代理地址1:端口",
    "http://用户名:密码@代理地址2:端口",
    "http://用户名:密码@代理地址3:端口"
]

def fetch_with_retry(url, max_retries=3):
    tried = set()

    for _ in range(max_retries):
        candidates = [
            proxy for proxy in proxy_list
            if proxy not in tried
        ]

        if not candidates:
            break

        proxy = random.choice(candidates)
        tried.add(proxy)

        try:
            response = requests.get(
                url,
                proxies={
                    "http": proxy,
                    "https": proxy
                },
                timeout=10
            )

            if response.status_code == 200:
                return response

        except requests.RequestException:
            pass

        time.sleep(1)

    return None

正式使用时，可以为每个代理记录以下状态：

代理池轮换的重点不是“随机得足够快”，而是让可用代理持续参与请求，让异常代理能够及时退出。

哪些任务不适合频繁轮换IP？

需要保持会话的任务不适合每次请求都更换IP。

以下任务通常应优先保持固定出口：

• 连续提交多个页面的业务流程。
• 需要维持登录态或授权状态的请求。
• 需要在一段时间内保持同一访问环境的监测任务。
• 长时间下载或持续连接任务。
• 需要关联前后请求的业务接口调用。

可以把请求划分成两类：

短请求：获取列表、读取公开页面、检查地域差异
长会话：登录、提交表单、连续操作、持续连接

短请求适合轮换IP，长会话更适合固定IP。若同一任务既有高频列表采集，又有连续会话操作，可以拆成两个请求链路，分别配置轮换策略。

如果代理服务支持会话标识，可以让同一任务使用同一个会话标识，在会话结束后再切换出口。若服务商没有明确提供这一能力，不要自行假设网关会自动保持固定IP。

如何验证代理IP轮换是否生效？

验证轮换是否生效，不能只看请求是否返回200，还要记录每次请求对应的出口IP和响应耗时。

可以使用合规的IP回显接口进行测试：

import requests

proxy = "http://用户名:密码@代理网关地址:端口"

for index in range(5):
    response = requests.get(
        "https://httpbin.org/ip",
        proxies={
            "http": proxy,
            "https": proxy
        },
        timeout=10
    )

    print(index, response.status_code, response.text)

测试时至少观察四项：

1. 连续请求返回的出口IP是否按照服务规则变化。
2. 代理IP变化后，请求成功率是否明显下降。
3. 同一出口IP是否被使用过于集中。
4. 连接超时、认证失败和目标响应错误是否能够区分记录。

建议将测试结果记录成如下格式：

如果连续多次返回同一个出口IP，可能是网关采用连接级切换，也可能是代理池暂时没有完成轮换。此时应先确认服务规则，再调整连接复用方式和轮换参数。

轮换失败时先查哪些配置？

IP轮换失败，优先检查代理地址、认证方式、协议映射和请求节奏，不要直接增加代理数量。

代理IP只能改变请求出口，不能替代合理的请求频率、并发设计和数据范围控制。公开数据采集、广告监测和舆情监测都应在目标方允许的访问规则内开展。

做公开数据采集，本篇判断怎么落到具体产品？

IP轮换的选型重点不是单纯追求更换次数，而是看业务需要每次换IP，还是需要保持一段时间的会话。

做网站采集器、广告监测和舆情监测这类高频公开数据请求，青果网络的隧道代理更适合减少程序侧的代理池维护。其基础规格提供5个请求数，对应5Mbps带宽与每秒5次请求，每增加请求数，带宽和最大请求频率同步扩展，按请求数计费，5个请求数规格为360元/月起（来源:青果网络官网）。

如果任务更关注单个出口的存活时间和会话连续性，则应改看长效代理或独享代理，而不是继续提高轮换频率。长效代理动态IP为49元/月起，独享代理按通道计费99元/月起，具体选择取决于任务是“每次请求换IP”，还是“在一段时间内保持同一出口”。

青果网络在这些场景中的判断是：轮换频率服务于请求模式，会话稳定性服务于任务链路，二者不能用同一个代理配置解决。

常见问题

Q1：HTTP代理IP为什么没有按照每次请求切换？

A：代理服务可能采用连接级切换，而不是请求级切换，也可能受会话标识、连接复用或当前代理池状态影响。先确认服务商的轮换规则，再测试是否需要关闭连接复用、重新建立连接或更换会话参数。

Q2：代理IP轮换越频繁越好吗？

A：不是。高频公开数据请求可以使用较快的轮换策略，但登录态、连续表单和长时间连接需要保持出口稳定。轮换过快可能造成会话中断、上下文丢失或请求链路无法关联。

Q3：随机选择代理和轮询代理有什么区别？

A：随机选择实现简单，但可能让少数代理被重复使用，也可能反复选中低质量代理。轮询更容易控制使用顺序，但无法自动识别代理质量差异。正式业务更适合结合成功率、响应时间和失败次数做健康选择。

Q4：代理池中出现连接失败的IP怎么办？

A：不要立即永久删除，可以先记录连续失败次数，将达到阈值的代理暂时移出可用池，经过冷却后重新检测。若多次检测仍失败，再从代理池中移除。

Q5：如何判断应该用短效代理还是隧道代理？

A：如果程序可以自己提取和切换IP，短效代理更适合按量获取大量短周期IP；如果希望使用固定代理入口，由服务端自动完成出口切换，隧道代理更适合。前者更偏向代理池管理，后者更偏向网关接入。

Q6：使用HTTP代理IP时还需要设置请求间隔吗？

A：需要。IP轮换只改变请求出口，不代表可以无限提高请求频率。应根据目标方公开规则设置并发数、请求间隔、超时时间和重试次数，并记录每次请求的响应结果。