粘性会话按时长出售。服务商提供 10、30 或 60 分钟的会话,买家选择能覆盖自己最长一次登录、结账或抓取的那一档。套餐页上的这个数字读起来像一个承诺,但它并不是承诺。
宣传的粘性会话时长,是会话可能持续的最长时间。它实际能保持多久,取决于出口背后的设备,而在住宅代理上,这台设备属于一个真实的人。本指南说明会话为何会提前结束、如何测量,以及 Atlas 如何报告这一指标。
什么是粘性会话
轮换住宅代理会为每个请求,或每一小批请求,分配一个新的出口 IP。粘性会话则要求网关在设定的时间内,持续通过同一个出口发送您的请求,通常的做法是把会话 ID 放进代理用户名。如果您想回顾这一机制本身,可以查看粘性会话词汇表条目。
粘性会话之所以存在,是因为有些目标站点会把状态绑定到地址上。登录、购物车、多页表单或分页搜索,一旦 IP 在中途变化,就可能中断,或触发安全校验。对于这类任务,问题不在于“会话有多长?”,而在于“它有多大概率能持续到我需要的时长?”。
为什么宣传的时长只是上限
网关只能在出口还存在时,让您保持在这个出口上。住宅出口是家庭或移动网络上的一台设备,而这类设备随时都可能消失:
- 机主关闭设备、关闭共享其带宽的应用,或让设备进入休眠。
- 手机从 Wi-Fi 切换到蜂窝网络,或从一个网络切换到另一个网络。
- 家用路由器重启,或 ISP 给这户家庭分配了新的地址。
- 网关判定该出口负载过高或状态不佳,把您转移到别处。
这些情况都不会理会您的会话计时器。一个 30 分钟的会话,如果所在设备在 8 分钟后离线,就会在 8 分钟时结束。服务商并没有在时长上撒谎;它报出的是配置值,而配置值只是一个上限。
因此方法论页面直言不讳:宣传的 TTL 是上限,而上限与您实际得到的时长之间的差距,几乎从不披露。
会话结束的两种方式
出口消失时,网关会采取两种做法之一。
明显失败。 您的下一个请求会返回代理错误、连接重置或超时。这虽然令人烦恼,但您的代码知道出了问题,可以开启新的会话。
悄悄切换。 网关把您的下一个请求通过另一个出口转发出去,并继续工作,会话 ID 不变,也没有任何错误。您的代码以为自己仍在同一个地址上。目标站点却在会话中途看到了新的 IP,于是您的登录被登出、购物车被清空,或账号被标记。
悄悄切换的危害更大,因为响应中没有任何信息告诉您它发生了。发现它的唯一办法,是对每个请求都自行检查出口 IP,并与会话开始时的 IP 比对。
保持率:真正重要的数字
既然时长只是上限,描述粘性产品的关键数字就是它的保持率:在整个宣传时长内都保持同一出口 IP 的会话所占的比例。
假设您开启 100 个会话,每个 30 分钟。如果其中 85 个在整整 30 分钟内都保持起始 IP,保持率就是 85%。其余 15 个提前结束了,无论是明显失败还是悄悄切换。宣传时长相同的两家服务商,保持率可能相差很大,而真正能预测您需要重启多少会话的,正是保持率。
Atlas 用与测试轮换产品相同的测试套件来测试粘性住宅产品,并加上 TTL 验证:对每个会话保持其完整的宣传时长,并记录目标站点看到的出口 IP 是否始终未变。会话设置保持各服务商的默认值,因此这个数字描述的是产品按出售状态的表现。结果在并排对比中显示为“Sticky sessions held”。它来自最近一次完整评估,因此无论您选择哪个时间窗口,读数都相同;对于尚未测量的网络,它显示 N/A,而不是按零计算。
如何解读保持率
保持率需要结合一些背景才有用。
它取决于您所要求的时长。 会话越长,设备掉线的时间越充裕,因此同一网络上 60 分钟的保持率通常会低于 10 分钟的保持率。请在相同条件下比较。
短往往比长更好。 如果您的任务需要 5 分钟,就请求一个不比这长多少的会话。工作完成后,更长的会话没有任何价值,还会让您停留在一个可能越来越不可靠的出口上。
地理位置会缩小可用池。 固定在小城市的会话,可供起步的设备更少,一台设备掉线时网关的选择也更少。保持率会因国家而异,请有此预期。
它与轮换行为不是一回事。 对于轮换产品,Atlas 还会报告每个出口 IP 承载的请求数,这反映“轮换”出口实际会停留多久。那是另一个问题:关注的是轮换是否在该发生时发生,而不是会话是否在该保持时保持。
设计能经受提前结束的任务
即使保持率很高,也仍有一部分会话会提前结束,所以要为此做好设计:
- 对每个请求都检查出口 IP。 将它与会话开始时的 IP 比较。无论状态码如何,IP 发生变化就意味着会话结束了。
- 让每个会话的工作保持简短。 把长流程拆成可以续接的步骤。步骤越短,会话中断的代价越小。
- 随时保存状态。 Cookie、令牌和当前页面应当在会话结束后仍然保留,这样新会话可以从旧会话停下的地方接着进行。
- 请求您需要的时长,而不是最大值。 这样能让您停留在较新的出口上,并让实际保持率更高。
- 干净地重启。 会话结束时,开启新的会话 ID,而不是在旧会话上重试。
对于以登录为主的工作,抓取需要登录的网站更深入地讲解了如何把账号固定到会话上以及如何保持 Cookie 有效。如果您还在判断某项任务是否需要粘性会话,粘性与轮换住宅代理介绍了其中的取舍。
亲自测试服务商的粘性会话
- 按您计划使用的时长至少开启 50 个粘性会话,并分散在一天中的不同时段,以便覆盖繁忙和空闲时段。
- 在每个会话中,每分钟向一个会回显所见 IP 的端点发送一次轻量请求。
- 记录起始 IP,以及回显 IP 第一次变化或请求第一次失败的那一分钟。
- 统计在整个时长内保持起始 IP 的会话数。这个比例就是您的保持率。
- 绘制每一分钟仍然存活的会话数量。曲线形状会显示会话是匀速失效,还是在某个特定时间点骤然下降。
然后把您的结果与 Atlas 对同一服务商给出的数字对照。如果两者不一致,原因通常出在您测试时的时长、地点或时段上。