Você compra proxies residenciais porque seus alvos tratam conexões domésticas de forma diferente de servidores. Se o que você recebe de fato é espaço de endereço de datacenter disfarçado de residencial, você está pagando um preço residencial pela exata coisa que tentava evitar, e vai descobrir isso por meio de uma taxa de bloqueio crescente, não por nada na fatura. Proxies residenciais falsos são o erro mais caro deste mercado justamente porque falham em silêncio.
A boa notícia é que essa é uma afirmação verificável. A natureza de um IP é um registro público, e você pode conferir isso sozinho em poucos minutos usando um teste gratuito ou uma pequena primeira compra. Aqui está o que de fato diferencia os dois tipos, por que alguns pools não são o que dizem ser, e as verificações específicas que separam um do outro.
O que torna um IP residencial
Um IP residencial é um endereço atribuído por um provedor de internet de consumo a uma conexão doméstica. Ele pertence a um ISP que vende banda larga para pessoas, está em um espaço de endereço registrado para acesso de consumo, e para um site parece uma pessoa comum em casa, motivo pelo qual é tratado como baixo risco. Os detalhes estão em a anatomia de um IP residencial.
Um IP de datacenter é um endereço atribuído a infraestrutura de hospedagem. Pertence a uma empresa de nuvem ou hospedagem, está em um espaço de endereço registrado para servidores, e é trivialmente identificável como tal porque esse registro é público. Os sites não estão adivinhando quando tratam essas faixas como tráfego de máquina, estão lendo um banco de dados, motivo pelo qual proxies de datacenter são bloqueados nos mesmos alvos onde o residencial funciona. A comparação completa está em proxy residencial vs proxy de datacenter.
A distinção que importa comercialmente: endereços residenciais são escassos e caros de obter de forma ética, endereços de datacenter são baratos e disponíveis em massa. Essa diferença de preço é exatamente o motivo pelo qual a deturpação acontece.
As formas que a deturpação assume
Raramente é tão explícito quanto vender um pool puramente de datacenter como residencial. Quatro padrões são mais comuns.
O primeiro é a diluição: um pool que é genuinamente residencial em parte, com faixas de datacenter misturadas para inflar o número anunciado e absorver a demanda. Suas primeiras requisições de teste podem parecer boas enquanto uma parcela significativa do tráfego de produção sai por espaço de servidor.
O segundo é o espaço adjacente à hospedagem rotulado incorretamente, ou seja, endereços que pertencem a um provedor de hospedagem ou a um revendedor, mas que ainda assim são anunciados como residenciais por não estarem nas faixas de nuvem mais conhecidas. Eles ainda estão registrados como infraestrutura, e os bancos de dados usados pelos sites ainda sabem disso.
O terceiro são endereços de ISP vendidos de forma ambígua. Proxies de ISP estáticos são um produto legítimo e útil, endereços hospedados registrados a um ISP de consumo, e não há nada de errado com eles. O que está errado é vendê-los como residencial rotativo sem dizer isso, porque eles se comportam de forma diferente: um pequeno conjunto fixo de endereços em vez de um grande pool rotativo de residências reais.
O quarto são alegações infladas de tamanho de pool, em que o número anunciado conta cada endereço já observado, em vez do que está concorrentemente disponível no país que você precisa. Isso não é falso no mesmo sentido, mas produz a mesma decepção, motivo pelo qual o tamanho do pool é uma métrica fraca comparada à densidade onde você de fato coleta.
Verificação um: o que o endereço está registrado como
A verificação mais rápida é o registro público. Pegue um punhado de endereços de saída do pool e consulte o ASN e a organização por trás de cada um. Uma saída residencial deve resolver para um provedor de internet de consumo, uma operadora de telecomunicações, uma operadora de cabo ou banda larga, o tipo de empresa que vende conexões para residências. Uma saída de datacenter resolve para uma empresa de hospedagem ou nuvem.
Faça isso em uma amostra, não em um único endereço, porque a diluição é o caso comum e um único resultado limpo não prova nada. Extraia cinquenta ou cem saídas, agrupe-as por organização e observe a distribuição. Se uma fatia perceptível pertence a provedores de hospedagem, você está diante de um pool misto. Essa é a mesma visibilidade de ASN que torna possível a segmentação por operadora, usada aqui como ferramenta de verificação.
import requests, collections
PROXY = "http://customer-USERNAME-country-us:PASSWORD@p.shifter.io:443"
seen = collections.Counter()
for _ in range(50): # sample the pool, do not trust one exit
r = requests.get("https://ipinfo.io/json",
proxies={"http": PROXY, "https": PROXY}, timeout=15)
d = r.json()
seen[(d.get("org"), d.get("country"))] += 1
for (org, country), n in seen.most_common():
print(f"{n:3} {country} {org}") # look for hosting/cloud names in the listUma lista de organizações dominada por ISPs de consumo é o resultado que você quer. Uma lista repleta de empresas de hospedagem revela o que você está de fato comprando.
Verificação dois: o que dizem os bancos de dados de inteligência de IP
O registro é a base, mas a questão prática é como os sites que você tem como alvo classificam um endereço, e eles usam serviços comerciais de inteligência de IP que atribuem um tipo de uso: residencial, hospedagem, empresarial, móvel. Vários desses serviços expõem uma consulta que você pode fazer diretamente, e alguns serviços de detecção de proxy dirão diretamente se um endereço está sinalizado como proxy ou como faixa de hospedagem.
Verifique sua amostra em uma ou duas dessas ferramentas e compare a resposta com a alegação do provedor. É aqui também que você aprende sobre reputação de IP, que é um eixo separado do tipo: um endereço pode ser genuinamente residencial e ainda assim estar fortemente sinalizado por abusos anteriores, e um pool de endereços reais, porém queimados, vai decepcionar você quase tanto quanto um falso.
Verificação três: comportamento em um alvo real
O teste definitivo é aquele que importa para o seu negócio, ou seja, se o tráfego funciona nos sites que você de fato precisa. Registro e bancos de dados são substitutos para a opinião de um alvo; a opinião do alvo é a verdade fundamental.
Escolha dois ou três dos seus alvos genuínos, idealmente incluindo um bem defendido, e execute um volume modesto pelo pool. Compare com um controle, seja um proxy de datacenter ou uma conexão direta, e observe não apenas bloqueios explícitos, mas as falhas mais sutis: páginas de desafio, respostas genéricas ou vazias, listagens truncadas e redirecionamentos, tudo isso pode chegar com status 200 e envenenar silenciosamente um conjunto de dados, como abordado em detectando conteúdo bloqueado ou falso. Se um pool supostamente residencial tem desempenho parecido com o de endereços de datacenter em um alvo conhecido por bloquear tráfego de datacenter, você tem sua resposta independentemente do que qualquer consulta diga.
Verificação quatro: as perguntas que um provedor deve conseguir responder
Parte disso é diligência, não medição, e as respostas são reveladoras.
Pergunte de onde vêm os endereços. Uma rede residencial ética obtém seus endereços por meio de consentimento informado, geralmente um arranjo divulgado de SDK ou aplicativo em que o participante sabe que sua conexão está sendo compartilhada e pode optar por não participar, e um provedor deve conseguir descrever essa cadeia de fornecimento sem desconforto. Vagueza aqui é o maior sinal de alerta, tanto ética quanto praticamente, já que fornecimento não divulgado tende a estar correlacionado com pools que são sinalizados. Isso também importa para conformidade, como abordado em GDPR e proxies residenciais e no artigo sobre fornecimento ético para coleta de dados de IA.
Pergunte qual é a composição do pool nos países específicos que você precisa, não globalmente. Pergunte se o produto é residencial rotativo, ISP estático, ou uma mistura, e espere uma resposta inequívoca. Pergunte como a concorrência e a rotação funcionam de fato, o que deve corresponder a como as redes de proxy funcionam na prática. E trate uma oferta residencial gratuita ou suspeitosamente barata com o ceticismo que ela merece, porque o fornecimento residencial genuíno tem um piso de custo real, e qualquer coisa muito abaixo disso está sendo subsidiada por algo, geralmente a qualidade do pool ou o consentimento das pessoas nele, argumento que aparece em proxies gratuitos versus pagos.
Uma rotina curta de verificação
Antes de se comprometer com um provedor, execute isto nesta ordem. Amostre de cinquenta a cem saídas e agrupe-as por ASN e organização, procurando nomes de hospedagem na mistura. Faça uma verificação cruzada de um subconjunto em uma consulta de inteligência de IP quanto ao tipo de uso e sinalizações de proxy. Execute tráfego real contra dois ou três dos seus próprios alvos, incluindo um defendido, e meça a taxa de sucesso com validação de resposta em vez de apenas códigos de status. Confirme que a geografia que você pagou é a geografia que você recebe, já que um pool escasso no seu país vai decepcionar mesmo que todo endereço seja genuinamente residencial. E faça a pergunta sobre o fornecimento diretamente. A metodologia completa de medição está em testando velocidade, taxa de sucesso e precisão de localização.
Nada disso leva muito tempo, e fazer isso antes de escalar é muito mais barato do que descobrir a resposta ao longo de um mês de coleta degradada.
Conclusão
Endereços residenciais e de datacenter diferem de uma forma que é publicamente documentada, o que significa que “esse pool é realmente residencial” é uma pergunta com resposta verificável, não uma questão de confiança. Faça uma amostra do pool e observe as organizações por trás das saídas, faça uma verificação cruzada do tipo de uso com inteligência de IP, e então teste nos seus próprios alvos com validação de resposta adequada, porque o veredito do alvo é o único que realmente conta. Pergunte de onde vêm os endereços e espere uma resposta clara. Um provedor que vende acesso residencial genuíno não tem motivo para ser vago sobre nada disso, e um que é vago já lhe disse algo útil.
Se você quiser executar essas verificações em um pool que as responda com clareza, é isso que são os proxies residenciais: endereços residenciais reais com segmentação por país e cidade, e o preço por GB significa que uma execução de verificação custa apenas a banda que utiliza, e nada mais.