博客
指南、教程与 洞察
从 Shifter 团队了解住宅代理、网页抓取、数据采集策略及行业最佳实践。
知识
知识 2 分钟阅读
为什么你的住宅代理请求会超时
一份代理超时的诊断指南:连接超时 vs 读取超时、过紧的地理过滤、按数据中心调的超时值,以及能快速找到真正原因的那几项检查。
知识
知识 2 分钟阅读
住宅代理故障转移:构建可靠的多区域数据管道
重试处理的是一个坏请求。故障转移处理的是一个坏依赖。如何设计能扛住封锁潮、地理降级和供应商事故的代理支撑管道。
知识
知识 1 分钟阅读
用住宅代理采集机票、酒店与旅行票价数据
旅行票价是按销售点(POS)定价的、基于会话的,而且易逝。为什么准确的机票和酒店数据采集,要按市场依赖住宅代理。
知识
知识 2 分钟阅读
住宅代理与 GDPR:一份合规概览
IP 地址可能就是个人数据,而代理并不能匿名化任何东西。合规团队真正该就住宅代理提出的那些 GDPR 问题。
知识
知识 3 分钟阅读
如何在 Docker 容器中配置住宅代理
Docker 里的代理配置:环境变量 vs daemon 代理、为什么 HTTP_PROXY 并不总是生效、用 NO_PROXY 放行内部流量、密钥处理,以及按容器的身份。
知识
知识 3 分钟阅读
住宅代理负载均衡:轮换、并发与重试架构
有了 gateway,池会自己做均衡。真正要紧的架构是你的:轮换单元、按主机的并发,以及一层不会放大封锁的重试。
知识
知识 2 分钟阅读
如何估算你每月的住宅代理带宽需求
在按 GB 的套餐上,带宽就是你所购买的东西。一个简单的公式、真实的每页大小,以及用来估算你每月住宅代理带宽的算例。
知识
知识 3 分钟阅读
如何测试住宅代理的速度、成功率与位置准确度
只看速度是个糟糕的基准。如何正确地测量住宅代理的成功率、延迟百分位与地理准确度,附可复制粘贴的 Python 测试。
知识
知识 1 分钟阅读
用住宅代理做新闻与媒体监测
新闻报道是分地区的、有地理限制的、且防机器人的,所以你只有像一个真实本地读者那样才能看到它。住宅代理如何让媒体监测按市场做到准确。