La plupart des comparaisons entre réseaux de proxies résidentiels sont décidées avant l’envoi de la première requête. Un fournisseur est testé le lundi, un autre le vendredi. L’un reçoit une cible facile, l’autre une cible difficile. L’un est jugé sur les codes de statut, l’autre sur le chargement effectif de la page. Le résultat ressemble à une mesure, mais il reflète surtout la manière dont le test a été conçu.
Ce guide explique comment bien le mettre en place. Que vous essayiez les proxies résidentiels de Shifter face à votre fournisseur actuel ou que vous choisissiez entre trois réseaux que vous n’avez jamais utilisés, les règles sont les mêmes, et ce sont celles qu’Atlas applique à chaque réseau qu’il teste.
La règle unique : mêmes requêtes, mêmes cibles, même fenêtre
Tout le reste de ce guide découle d’un seul principe. Chaque réseau de la comparaison doit recevoir les mêmes requêtes, envoyées vers les mêmes cibles, depuis les mêmes localisations, au même moment.
Le « même moment » est le point que l’on omet le plus souvent. Les sites cibles modifient leurs défenses d’une heure à l’autre. Un pool résidentiel est un ensemble mouvant de connexions de particuliers, qui grossit et diminue au fil de la journée. Si vous testez le réseau A à midi et le réseau B à minuit, vous comparez deux moments, pas deux réseaux. Lancez-les en parallèle, ou entrelacez leurs requêtes dans une même exécution, afin que ce que font la cible et Internet touche les deux de la même façon.
Atlas applique ce principe comme une condition stricte : chaque réseau suit le même calendrier, et les résultats sont regroupés en créneaux horaires de poids égal, de sorte qu’un réseau ne puisse pas paraître meilleur simplement parce qu’il a été testé à une heure creuse. Les règles de fenêtre de la page de méthodologie détaillent précisément la façon de procéder.
Rédigez la règle de réussite avant de tester
Une comparaison exige une définition du succès qui ne dépende pas du réseau. Fixez-la par cible, par écrit, avant d’envoyer quoi que ce soit.
- Pour une page HTML, le succès est un élément précis que vous pouvez analyser : un prix, un titre de produit, une liste de résultats contenant au moins un résultat.
- Pour une API, c’est une réponse JSON contenant les champs dont vous avez besoin.
- Pour une page de recherche, ce sont des résultats, et non une page vide ou un mur de consentement.
Tout ce qui ne respecte pas la règle est un échec, quel que soit son code de statut. Cela compte, car un CAPTCHA ou une page intermédiaire arrive généralement avec un code HTTP 200. Un test qui compte les codes de statut annoncera un taux de réussite quasi parfait pour des réseaux qui sont mis au défi sur une large part des requêtes. Classez chaque échec au fur et à mesure (défi, blocage, expiration du délai), car la répartition vous renseigne davantage que le total.
Choisissez des cibles qui ressemblent à votre travail
Un point de terminaison de test sans protection vous dira que tous les réseaux sont excellents. C’est vrai et inutile. Les différences entre pools résidentiels n’apparaissent que sur des sites qui se défendent activement, et elles apparaissent différemment sur chacun.
Choisissez un petit ensemble de cibles qui ressemblent à ce que vous allez réellement collecter ou vérifier, couvrant plusieurs niveaux de difficulté : une page ouverte comme témoin, une place de marché, un moteur de recherche et le site le plus difficile dont vous dépendez. Lisez les résultats cible par cible, pas seulement en moyenne. Le taux de réussite sur chaque cible de test d’Atlas montre à quel point l’ordre des réseaux peut changer d’un site à l’autre.
Mesurez du côté de la cible
Deux éléments qui ressemblent à des détails déterminent si vos résultats sont réels.
Enregistrez l’IP de sortie vue par la cible. Faites en sorte que chaque requête renvoie ou consigne l’adresse qui a atteint la cible, et non celle que rapporte le tableau de bord du fournisseur. Les tableaux de bord peuvent être mis en cache, décrire la passerelle plutôt que la sortie, ou tout simplement se tromper. Tout ce que vous direz ensuite sur la taille du pool, la précision de la localisation et le recoupement dépend de ce seul champ.
Recherchez vous-même la sortie. Associez chaque adresse à un pays, une ville et un ASN à l’aide d’une base de données publique, au moment de la requête. C’est ainsi que vous saurez si un pool vendu comme résidentiel contient des adresses d’hébergement, ou si une requête destinée à un pays sort dans un autre.
Testez au volume que vous utiliserez
La latence au repos n’est pas la latence en charge. De nombreuses passerelles sont rapides pour une poignée de requêtes et ralentissent nettement en concurrence soutenue, qui est pourtant la condition dans laquelle vous serez réellement.
Exécutez au moins une partie du test à la concurrence que vous prévoyez en production, et présentez des percentiles plutôt qu’une moyenne. La médiane renseigne sur une requête typique ; la queue lente indique si votre tâche se terminera à temps. Conservez les réglages de session et de rotation de chaque fournisseur à leurs valeurs par défaut, sauf si vous les modifierez en production, afin de mesurer le produit tel qu’il est vendu et non une configuration dont personne d’autre ne dispose.
Collectez assez de données pour qu’elles aient un sens
Quelques dizaines de requêtes par réseau produiront un classement, mais pas un classement qui résiste à une nouvelle exécution. Les petits échantillons sont dominés par le hasard : une mauvaise minute sur une cible peut faire basculer le résultat.
Répartissez les requêtes uniformément entre vos cibles et sur une fenêtre assez longue pour inclure des heures calmes et des heures chargées. Relancez la comparaison un deuxième jour avant d’agir sur un écart faible. Si l’ordre s’inverse, les réseaux sont proches, et c’est le prix ou l’assistance qui doit trancher. Comptez au passage les IP de sortie distinctes que chaque réseau vous a attribuées. Si vous prévoyez d’utiliser deux fournisseurs par souci de redondance, croisez ces ensembles, car deux réseaux qui partagent la plupart de leurs adresses ne constituent pas deux sources.
Comparez le coût en dernier
Ce n’est qu’une fois le succès mesuré équitablement que le prix prend un sens. Divisez ce que coûterait chaque réseau pour votre trafic par le nombre de requêtes qui ont satisfait votre règle. Les requêtes échouées sont tout de même facturées : un tarif affiché bas associé à un faible taux de réussite peut donc être l’option la plus chère. Notre guide sur le coût par requête réussie détaille le calcul.
Liste de contrôle pour un test équitable
- Mêmes requêtes, mêmes cibles, mêmes localisations, même fenêtre pour chaque réseau.
- Une règle de réussite écrite par cible, fixée avant le test.
- Échecs classés en défi, blocage ou expiration du délai.
- Des cibles qui ressemblent à votre charge de travail réelle, dont une difficile.
- IP de sortie enregistrée du côté de la cible et recherchée de façon indépendante.
- Une partie du test à la concurrence de production, avec des percentiles de latence.
- Réglages par défaut du fournisseur pour la session et la rotation.
- Assez de requêtes, sur assez d’heures, pour résister à une nouvelle exécution.
- Coût par requête réussie calculé en dernier.
Si vous souhaitez du code fonctionnel pour les mesures elles-mêmes, notre article sur la façon de tester la vitesse, le taux de réussite et la précision de localisation d’un proxy résidentiel propose des scripts que vous pouvez adapter. Atlas exécute en continu l’ensemble de cette liste, et la page de comparaison côte à côte vous permet de mettre face à face n’importe quels réseaux qu’il teste avant de dépenser un essai sur eux.