La question revient dans chaque évaluation, généralement formulée comme une demande de classement. Elle mérite une réponse plus utile qu’une liste, car la disponibilité n’est pas une propriété fixe d’un pays. Elle varie selon le fournisseur, elle évolue au fil de la journée, elle diffère entre le niveau pays et le niveau ville, et le seul chiffre qui affecte votre projet est celui des marchés spécifiques où vous collectez, à la concurrence que vous utilisez réellement.
Voici ce qui détermine la disponibilité, quels pays ont tendance à être profonds et lesquels ont tendance à être limités, et comment mesurer la réponse par vous-même plutôt que de faire confiance au graphique de qui que ce soit.
Ce qui détermine réellement la disponibilité
Trois facteurs déterminent le nombre d’adresses utilisables qui existent dans un pays à un moment donné.
Population et pénétration du haut débit. Un pool résidentiel est constitué de vraies connexions domestiques, donc sa taille dans un pays est limitée par le nombre de foyers disposant du haut débit et le nombre de ceux qui y participent. Les pays vastes et hautement connectés ont des pools profonds presque par définition, et les pays petits ou peu connectés n’en ont pas, quelle que soit la façon dont le fournisseur opère.
La façon dont le pool est constitué. La participation se fait par des accords divulgués, généralement des applications et des SDK, et ceux-ci ont leur propre répartition géographique. Un fournisseur dont l’approvisionnement provient d’applications populaires dans une région sera fort dans cette région et plus faible ailleurs. C’est pourquoi deux fournisseurs annonçant des totaux mondiaux similaires peuvent différer substantiellement dans le même pays.
L’heure de la journée. Ce facteur est régulièrement oublié et pourtant il compte. Les adresses résidentielles appartiennent à des appareils allumés et connectés, donc le pool disponible d’un pays suit l’activité humaine : plus profond le soir localement, plus limité au petit matin. Une tâche qui s’exécute à 04:00 heure locale dans un petit marché puise dans un ensemble nettement plus restreint que la même tâche à 20:00.
La configuration générale
Sans prétendre à un classement qui serait obsolète dès le trimestre suivant, le schéma est prévisible.
La disponibilité la plus profonde se trouve dans les marchés vastes et hautement connectés : les États-Unis, le Royaume-Uni, l’Allemagne, la France, le Brésil, l’Inde, le Japon, le Canada, et des économies comparables. Dans ceux-ci, vous pouvez généralement exécuter un travail au niveau pays à une concurrence significative, et souvent un travail au niveau ville dans les grandes métropoles, sans même vous soucier de la profondeur du pool.
La disponibilité intermédiaire couvre la majeure partie de l’Europe, une grande partie de l’Amérique latine et de l’Asie du Sud-Est, et les plus grands marchés africains. Le ciblage au niveau pays est généralement confortable ; le ciblage au niveau ville en dehors des plus grandes villes commence à devenir limité, et la concurrence a un plafond plus bas avant que vous ne commenciez à solliciter les mêmes adresses de façon répétée.
La disponibilité la plus faible se trouve dans les petits pays, les pays peu peuplés, et les endroits où le haut débit résidentiel est limité. Le travail au niveau pays fonctionne souvent bien à volume modeste ; le filtrage au niveau ville ou ASN peut ne renvoyer que très peu de résultats, et c’est là que le comportement de repli et la planification commencent à compter.
L’enseignement utile n’est pas les niveaux eux-mêmes mais ce qu’ils impliquent : adaptez votre ambition au marché. Le ciblage au niveau ville dans les grandes métropoles américaines est routinier, alors que la même approche dans un petit marché peut ne pas être soutenable du tout, ce qui est le jugement à porter dans quand le ciblage proxy au niveau ville compte.
La métrique qui compte réellement
Les chiffres globaux de pool sont proches de l’inutile pour cette décision, car un chiffre couvrant 195 pays ne vous dit rien sur celui dont vous avez besoin. Quatre éléments comptent.
La disponibilité concurrente dans votre pays, c’est-à-dire combien d’adresses distinctes vous pouvez réellement utiliser en même temps là-bas, plutôt que combien le réseau en a jamais vu. C’est ce qui limite une tâche importante dans un petit marché.
La profondeur en dessous du niveau pays, si vous en avez besoin. Le ciblage par ville ne fonctionne que là où il y a suffisamment d’adresses dans cette ville, et il en va de même pour le ciblage ASN lorsque vous avez besoin d’un opérateur spécifique.
La stabilité dans le temps, car un pool qui est adéquat à 20:00 et limité à 04:00 produira une tâche qui réussit lors des tests et échoue selon son planning.
La précision de la géolocalisation, qui est un axe totalement séparé. Une adresse peut réellement se trouver dans un pays alors que les bases de données utilisées par une cible sont en désaccord, donc le test pratique consiste à vérifier si la cible se comporte comme si vous étiez là-bas, et non si un service de vérification l’affirme.
Mesurer par vous-même
Cela prend vingt minutes et surpasse tout chiffre publié.
Échantillonnez des sorties dans le pays qui vous intéresse et comptez les adresses distinctes et les organisations distinctes sur quelques centaines de requêtes. La répétition vous indique que le pool effectif pour votre filtre est petit ; une large répartition de FAI grand public vous indique qu’il est sain. Le même échantillonnage vous indique d’ailleurs si le pool est réellement résidentiel, selon repérer les IP de datacenter vendues comme résidentielles.
Exécutez ensuite l’échantillon à la concurrence que vous prévoyez réellement, car la disponibilité à une requête à la fois et la disponibilité à cinquante en cours sont des questions différentes. Et exécutez-le aux heures où votre tâche s’exécutera, y compris les heures les moins prisées, car c’est là que les marchés limités se révèlent.
Enfin, testez contre une vraie cible plutôt qu’un point de terminaison d’écho IP, en confirmant que le site vous sert du contenu local dans la devise et la langue locales. La méthode complète se trouve dans tester la vitesse, le taux de réussite et la précision de la localisation.
Travailler avec un marché limité
Lorsqu’un pays n’a réellement pas la profondeur que vous souhaitez, plusieurs choses aident avant de conclure que c’est impossible.
Élargissez le filtre. Passez de la ville à la région, ou de la région au pays. La plupart du temps, la précision géographique que vous avez demandée est plus fine que ce que les données exigent réellement.
Comprenez le repli. Par défaut, lorsque rien ne correspond à un filtre très restreint à ce moment-là, la passerelle se replie sur un pool plus large afin que la requête aboutisse quand même, ce qui est généralement ce que vous voulez. Lorsqu’une correspondance exacte compte plus que la réussite de la requête, strict-true la fait renvoyer un 502 à la place, et savoir quel comportement vous obtenez est important : un repli silencieux dans une tâche sensible à la géolocalisation produit des données plausibles mais erronées.
Réduisez la concurrence et allongez la fenêtre. Un marché limité supporte souvent le volume dont vous avez besoin, simplement pas le rythme. Étaler le même travail sur davantage d’heures peut transformer une tâche impossible en tâche routinière.
Planifiez selon l’activité locale. Exécuter votre tâche lorsque le pays est éveillé vous donne un pool plus profond gratuitement.
Reconsidérez l’exigence. Parfois, les données au niveau pays sont réellement suffisantes et l’exigence au niveau ville venait de l’habitude plutôt que du besoin.
L’essentiel à retenir
Il n’existe pas de classement stable des pays, et un chiffre global de pool répond à une question que personne ne pose vraiment. La disponibilité est déterminée par la pénétration du haut débit, par la façon dont un fournisseur constitue son approvisionnement, et par l’heure de la journée, ce qui explique pourquoi les grands marchés connectés sont constamment profonds et les petits ne le sont pas, et pourquoi le même pays peut sembler différent à 04:00 et à 20:00. Ce qui compte pour votre projet, c’est la disponibilité concurrente dans vos marchés spécifiques, la profondeur en dessous du niveau pays si vous avez besoin d’une précision au niveau ville ou ASN, la stabilité pendant les heures où vous fonctionnez, et le fait que les cibles vous traitent réellement comme local. Mesurez cela vous-même sur un petit achat plutôt que de faire confiance à un graphique, et lorsqu’un marché est limité, élargissez le filtre, décidez délibérément entre repli et correspondance stricte, réduisez le rythme plutôt que d’abandonner le marché, et exécutez lorsque ses habitants sont en ligne.
À travers les proxies résidentiels, le pool couvre 195 pays avec des filtres par pays, région, ville et ASN et un repli documenté, et la tarification au GB signifie que le test de disponibilité décrit ci-dessus ne coûte que la bande passante utilisée.