Vrais et faux proxys résidentiels : comment repérer des IP datacenter vendues comme résidentielles

Vous achetez des proxies résidentiels parce que vos cibles traitent les connexions domestiques différemment des serveurs. Si ce que vous recevez réellement est un espace d’adresses de datacenter portant une étiquette résidentielle, vous payez un prix résidentiel pour exactement la chose que vous cherchiez à éviter, et vous vous en rendrez compte via un taux de blocage croissant plutôt que via quoi que ce soit sur la facture. Les faux proxies résidentiels sont l’erreur la plus coûteuse de ce marché précisément parce qu’ils échouent silencieusement.

La bonne nouvelle, c’est qu’il s’agit d’une affirmation vérifiable. La nature d’une IP relève du domaine public, et vous pouvez le vérifier vous-même en quelques minutes lors d’un essai ou d’un premier petit achat. Voici en quoi consiste réellement la différence, pourquoi certains pools ne sont pas ce qu’ils prétendent être, et les vérifications précises qui permettent de distinguer les deux.

Ce qui rend une IP résidentielle

Une IP résidentielle est une adresse qu’un fournisseur d’accès internet grand public a attribuée à une connexion de foyer. Elle appartient à un FAI qui vend de la connexion à des particuliers, elle se situe dans un espace d’adresses enregistré pour un accès grand public, et pour un site web elle ressemble à une personne ordinaire chez elle, ce qui explique justement pourquoi elle est considérée comme peu risquée. Les détails se trouvent dans l’anatomie d’une IP résidentielle.

Une IP de datacenter est une adresse attribuée à une infrastructure d’hébergement. Elle appartient à une entreprise de cloud ou d’hébergement, elle se situe dans un espace d’adresses enregistré pour des serveurs, et elle est trivialement identifiable comme telle car cet enregistrement est public. Les sites ne devinent pas quand ils traitent ces plages comme du trafic machine, ils lisent une base de données, ce qui explique pourquoi les proxies de datacenter sont bloqués sur les cibles où le résidentiel fonctionne. La comparaison complète se trouve dans proxies résidentiels vs datacenter.

La distinction qui compte commercialement : les adresses résidentielles sont rares et coûteuses à obtenir de manière éthique, les adresses de datacenter sont bon marché et disponibles en masse. Cet écart de prix explique précisément pourquoi la présentation trompeuse se produit.

Les formes que prend la présentation trompeuse

C’est rarement aussi brutal que de vendre un pool purement datacenter comme résidentiel. Quatre schémas sont plus courants.

Le premier est la dilution : un pool qui est authentiquement résidentiel en partie, avec des plages de datacenter mélangées pour gonfler le chiffre affiché et absorber la demande. Vos premières requêtes de test peuvent sembler correctes alors qu’une part significative du trafic de production transite par de l’espace serveur.

Le deuxième est l’espace adjacent à l’hébergement mal étiqueté, c’est-à-dire des adresses qui appartiennent à un fournisseur d’hébergement ou à un revendeur, mais qui sont néanmoins présentées comme résidentielles parce qu’elles ne figurent pas dans les plages cloud les plus connues. Elles restent enregistrées au nom d’une infrastructure, et les bases de données utilisées par les sites le savent toujours.

Le troisième est les adresses ISP vendues de manière ambiguë. Les proxies ISP statiques sont un produit légitime et utile, des adresses hébergées enregistrées auprès d’un FAI grand public, et il n’y a rien de mal à cela. Ce qui pose problème, c’est de les vendre comme résidentiel rotatif sans le préciser, car elles se comportent différemment : un petit ensemble fixe d’adresses plutôt qu’un large pool rotatif de vrais foyers.

Le quatrième est les affirmations de pool gonflées, où le chiffre annoncé compte chaque adresse jamais observée plutôt que ce qui est disponible simultanément dans le pays dont vous avez besoin. Ce n’est pas faux au même sens, mais cela produit la même déception, ce qui explique pourquoi la taille du pool est un indicateur faible comparé à la densité là où vous collectez réellement.

Vérification un : ce à quoi l’adresse est enregistrée

La vérification la plus rapide est l’enregistrement public. Prenez une poignée d’adresses de sortie du pool et consultez l’ASN et l’organisation derrière chacune. Une sortie résidentielle devrait correspondre à un fournisseur d’accès internet grand public, un opérateur télécom, un opérateur câble ou haut débit, le genre d’entreprise qui vend des connexions aux foyers. Une sortie de datacenter correspond à une entreprise d’hébergement ou de cloud.

Effectuez cette vérification sur un échantillon plutôt que sur une seule adresse, car la dilution est le cas courant et un seul résultat propre ne prouve rien. Prélevez cinquante ou cent sorties, regroupez-les par organisation, et observez la répartition. Si une part notable appartient à des fournisseurs d’hébergement, vous avez affaire à un pool mixte. C’est la même visibilité ASN qui rend possible le ciblage par opérateur, utilisée ici comme outil de vérification.

import requests, collections

PROXY = "http://customer-USERNAME-country-us:PASSWORD@p.shifter.io:443"
seen = collections.Counter()

for _ in range(50):                       # sample the pool, do not trust one exit
    r = requests.get("https://ipinfo.io/json",
                     proxies={"http": PROXY, "https": PROXY}, timeout=15)
    d = r.json()
    seen[(d.get("org"), d.get("country"))] += 1

for (org, country), n in seen.most_common():
    print(f"{n:3}  {country}  {org}")     # look for hosting/cloud names in the list

Une liste d’organisations dominée par des FAI grand public est le résultat recherché. Une liste parsemée d’entreprises d’hébergement vous indique ce que vous achetez réellement.

Vérification deux : ce que disent les bases de données de renseignement IP

L’enregistrement est la base, mais la question pratique est de savoir comment les sites que vous ciblez classent une adresse, et ils utilisent des services commerciaux de renseignement IP qui attribuent un type d’usage : résidentiel, hébergement, entreprise, mobile. Plusieurs de ces services proposent une consultation que vous pouvez interroger directement, et certains services de détection de proxy vous diront carrément si une adresse est signalée comme proxy ou comme plage d’hébergement.

Vérifiez votre échantillon avec un ou deux de ces services et comparez la réponse avec l’affirmation du fournisseur. C’est aussi là que vous découvrez la réputation IP, qui est un axe distinct du type : une adresse peut être authentiquement résidentielle et pourtant fortement signalée à cause d’un abus antérieur, et un pool d’adresses réelles mais grillées vous décevra presque autant qu’un pool faux.

Vérification trois : le comportement sur une cible réelle

Le test définitif est celui qui compte pour votre activité, à savoir si le trafic fonctionne sur les sites dont vous avez réellement besoin. L’enregistrement et les bases de données sont des indicateurs indirects de l’opinion d’une cible ; l’opinion de la cible est la vérité de terrain.

Choisissez deux ou trois de vos cibles réelles, idéalement en incluant une bien défendue, et faites passer un volume modeste à travers le pool. Comparez avec un témoin, soit un proxy de datacenter soit une connexion directe, et surveillez non seulement les blocages francs mais aussi les échecs plus subtils : pages de challenge, réponses génériques ou vides, listages tronqués, et redirections, qui peuvent tous arriver avec un statut 200 et empoisonner silencieusement un jeu de données, comme évoqué dans détecter le contenu bloqué ou factice. Si un pool prétendument résidentiel performe à peu près aussi bien que des adresses de datacenter sur une cible connue pour bloquer le trafic datacenter, vous avez votre réponse, quel que soit ce que dit une consultation.

Vérification quatre : les questions auxquelles un fournisseur devrait pouvoir répondre

Une partie de cela relève de la diligence plutôt que de la mesure, et les réponses sont révélatrices.

Demandez d’où viennent les adresses. Un réseau résidentiel éthique s’approvisionne en adresses via un consentement éclairé, généralement un accord SDK ou application divulgué où le participant sait que sa connexion est partagée et peut s’en retirer, et un fournisseur devrait pouvoir décrire cette chaîne d’approvisionnement sans malaise. Le flou à ce sujet est le signal d’alarme le plus important, tant sur le plan éthique que pratique, car un approvisionnement non divulgué a tendance à être corrélé avec des pools qui se font signaler. Cela compte aussi pour la conformité, comme le montre le RGPD et les proxies résidentiels ainsi que l’article sur l’approvisionnement éthique pour la collecte de données IA.

Demandez quelle est la composition du pool dans les pays précis dont vous avez besoin, pas globalement. Demandez si le produit est résidentiel rotatif, ISP statique, ou un mélange, et attendez-vous à une réponse sans ambiguïté. Demandez comment fonctionnent réellement la concurrence et la rotation, ce qui devrait correspondre à comment fonctionnent les réseaux de proxies en pratique. Et traitez une offre résidentielle gratuite ou suspicieusement bon marché avec le scepticisme qu’elle mérite, car un véritable approvisionnement résidentiel a un coût plancher réel et tout ce qui est bien en dessous est subventionné par quelque chose, généralement la qualité du pool ou le consentement des personnes qui le composent, ce qui est l’argument développé dans proxies gratuits versus payants.

Une courte routine de vérification

Avant de vous engager avec un fournisseur, exécutez ceci dans l’ordre. Échantillonnez cinquante à cent sorties et regroupez-les par ASN et organisation, en cherchant des noms d’hébergeurs dans le mélange. Recoupez un sous-ensemble avec une consultation de renseignement IP pour le type d’usage et les signalements de proxy. Faites passer du trafic réel sur deux ou trois de vos propres cibles, y compris une bien défendue, et mesurez le taux de réussite avec une validation des réponses plutôt qu’avec les seuls codes de statut. Confirmez que la géographie que vous avez payée est celle que vous obtenez, car un pool peu fourni dans votre pays vous décevra même si chaque adresse est authentiquement résidentielle. Et posez directement la question de l’approvisionnement. La méthodologie de mesure complète se trouve dans tester la vitesse, le taux de réussite et la précision de localisation.

Rien de tout cela ne prend longtemps, et le faire avant de passer à l’échelle coûte bien moins cher que de découvrir la réponse après un mois de collecte dégradée.

En résumé

Les adresses résidentielles et de datacenter diffèrent d’une manière qui est documentée publiquement, ce qui signifie que « ce pool est-il vraiment résidentiel » est une question dont la réponse est vérifiable plutôt qu’une affaire de confiance. Échantillonnez le pool et examinez les organisations derrière les sorties, recoupez le type d’usage avec le renseignement IP, puis testez sur vos propres cibles avec une validation correcte des réponses, car le verdict de la cible est le seul qui compte vraiment. Demandez d’où viennent les adresses et attendez-vous à une réponse claire. Un fournisseur qui vend un véritable accès résidentiel n’a aucune raison d’être vague sur quoi que ce soit, et celui qui l’est vous a appris quelque chose d’utile.

Si vous voulez effectuer ces vérifications sur un pool qui y répond clairement, c’est exactement ce que sont les proxies résidentiels, de vraies adresses de qualité domestique avec ciblage par pays et par ville, et la tarification au Go fait qu’une vérification ne vous coûte que la bande passante utilisée, rien de plus.