Todo provedor de proxy tem uma alegação de velocidade. Alguns citam um tempo de resposta, outros um “ping”, outros dizem apenas “o mais rápido”. Esses números raramente são falsos, a rigor. Eles são medidos da forma mais favorável possível e depois comparados com números medidos de outra maneira.
Se você está escolhendo proxies residenciais em parte pela velocidade, a habilidade útil não é encontrar o menor número. É saber o que cada número mediu, para distinguir quais deles descrevem as requisições que o seu código realmente vai enviar.
O que o ping de um proxy mede
“Ping de proxy” costuma significar uma de duas coisas: um ping ICMP para o gateway do provedor ou o tempo para abrir uma conexão com ele. Os dois medem a distância entre você e o servidor de entrada do provedor. Nenhum dos dois toca na parte do trajeto que torna os proxies residenciais lentos.
Uma requisição residencial viaja do seu cliente até o gateway, do gateway até um dispositivo de consumidor em uma conexão doméstica ou móvel, desse dispositivo até o alvo e volta pelo mesmo caminho. O gateway costuma ficar em um data center bem conectado e próximo de você. A saída é um dispositivo na banda larga ou no Wi-Fi de alguém, que pode estar em outro continente. Um ping baixo até o gateway é bom de ter, mas é a menor parte do que você espera.
Portanto, o ping é um bom diagnóstico para “minha conexão com o provedor está saudável?” e uma resposta ruim para “qual provedor é o mais rápido?”.
Cinco perguntas que expõem uma alegação de velocidade
Quando você vir um número de velocidade, seja de um provedor, de uma avaliação ou de um benchmark, pergunte:
- Medido até qual ponto? Tempo de conexão, primeiro byte ou último byte. O último byte é o que o seu código espera.
- Qual percentil? Uma média ou uma mediana esconde a cauda lenta. O guia para ler um gráfico de latência explica por que o p99 muitas vezes importa mais.
- Sob qual carga? Dez requisições em uma conta ociosa não se parecem em nada com mil requisições simultâneas.
- De onde, para onde? O ponto de origem, o país de saída e o alvo alteram o resultado. Um número para um país diz pouco sobre outro.
- O que aconteceu com as falhas? Se bloqueios e timeouts foram descartados antes da média, o número descreve apenas as requisições que deram certo.
Uma alegação que não consegue responder a essas perguntas é um número de marketing. Isso não a torna falsa; torna-a impossível de comparar.
Um bloqueio rápido continua sendo uma falha
A forma mais comum de parecer rápido é falhar rápido. Um alvo que recusa uma requisição com um 403 ou serve um CAPTCHA faz menos trabalho do que um que renderiza a página inteira, então a recusa muitas vezes volta antes. Um pool cheio de endereços marcados pode registrar um tempo de resposta impressionante exatamente por esse motivo.
Por isso a velocidade só significa algo ao lado do sucesso. O Atlas pontua cada alvo com 80% de sucesso e 20% de velocidade sob carga, cada um em relação ao líder, de modo que uma rede não sobe no ranking sendo rápida em ser recusada. O mesmo princípio vale para os seus próprios testes: nunca leia uma coluna de tempo sem a coluna de sucesso ao lado. Para ver o que requisições lentas e com falha fazem com a sua fatura, consulte custo por requisição bem-sucedida.
Como o Atlas pontua a velocidade
O Atlas publica um único número de velocidade na pontuação e mostra os demais ao lado dele.
O que é cronometrado. O tempo do início da requisição até o último byte, através do proxy, em um alvo HTTP simples. Alvos HTTPS acrescentam um CONNECT e um handshake TLS, o que praticamente dobra os round trips, então eles informam sucesso e bloqueios, mas não latência. Misturá-los recompensaria as redes pelos alvos em que calharam de ser testadas.
Sob carga. Cada região de coleta escolhe seu país mais rápido como referência. Em cada janela de tempo, esse país recebe um pulso leve de requisições e, um minuto depois, uma onda na concorrência total do censo. A razão entre os dois é o fator de lentidão da região, aplicado à latência sob carga leve de todos os países testados a partir dessa região. A latência sob carga leve aparece ao lado, para que você veja quanto cada rede desacelera quando está ocupada.
Pontuada como uma razão. A subpontuação de velocidade é o p50 da rede sob carga comparado com o da rede mais rápida do Atlas: 100 × líder ÷ a sua. O líder recebe 100; uma rede com o dobro da latência do líder recebe 50. A velocidade responde por 14% do Atlas Score padrão. As regras exatas de pontuação mostram cada etapa.
Se a velocidade importa mais para a sua carga de trabalho do que os pesos padrão pressupõem, a predefinição Latency first do ranking reajusta a classificação para que a velocidade conte mais.
A velocidade varia por alvo e por país
Não existe um único “proxy residencial mais rápido”. Existe uma rede que é a mais rápida a partir de uma determinada região, para um determinado país, em um determinado tipo de alvo, em um determinado horário.
País. Saídas em países com banda larga doméstica rápida e rotas curtas até o alvo respondem mais cedo. Pedir uma localização estreita, como uma cidade, reduz o conjunto de saídas disponíveis, e o gateway pode entregar uma mais lenta porque é a única disponível.
Alvo. Uma página pesada, com recursos grandes, demora mais do que um pequeno endpoint JSON em qualquer rede. Alvos protegidos podem acrescentar um round trip de desafio mesmo em uma requisição que acaba dando certo. Os resultados por alvo mostram quanto o resultado da mesma rede muda de um site para outro.
Horário. As saídas residenciais dividem a banda com as pessoas donas dos dispositivos. Picos noturnos no país da saída podem deixar lentas requisições que corriam bem no café da manhã. Um número de uma única hora é um retrato do momento.
Quando a velocidade importa e quando não importa
Antes de pagar mais por velocidade, verifique se o seu trabalho é limitado por ela.
Coleta em massa. Se você está buscando uma grande lista de páginas sem ninguém esperando, a vazão é definida mais pela concorrência do que pela latência por requisição. Executar mais requisições em paralelo costuma terminar antes do que trocar para uma rede com uma mediana um pouco menor. A taxa de sucesso importa mais aqui, porque cada falha é uma nova tentativa.
Trabalho interativo ou em tempo real. Verificações de preço no momento de uma decisão, verificação de anúncios ou qualquer coisa que uma pessoa esteja esperando é limitado pela cauda. Aqui o p90 e o p99 importam tanto quanto a mediana.
Sessões de várias etapas. Logins, carrinhos e fluxos paginados rodam em sequência, então cada etapa lenta soma ao total. A consistência importa mais do que a velocidade bruta.
Boa parte da latência que as pessoas atribuem aos provedores está no próprio cliente: falta de reutilização de conexão, filtros geográficos apertados demais, timeouts longos. Reduzindo a latência ao usar proxies residenciais trata das correções que valem a pena tentar antes de você trocar de provedor.
Verificando você mesmo uma alegação de velocidade
- Escolha dois ou três alvos que você realmente usa, incluindo pelo menos uma página HTTP simples, para poder cronometrar a rede sem os round trips de TLS.
- Envie as mesmas requisições por cada rede na mesma hora, a partir da mesma máquina, na concorrência que você usa em produção.
- Cronometre cada requisição até o último byte e registre se ela passou na sua própria verificação de página real.
- Informe o p50, o p90 e o p99 das requisições bem-sucedidas, com a taxa de sucesso ao lado.
- Repita em um horário de pico no país da saída. Se a classificação se inverter, você aprendeu qual rede se sustenta sob carga.
Depois, compare os seus números com os do Atlas, que aplica a mesma disciplina continuamente e testa a Shifter pelas mesmas regras de qualquer outra rede.