Echte vs. gefälschte Residential Proxies: So erkennen Sie Datacenter-IPs, die als Residential verkauft werden

Sie kaufen Residential-Proxys, weil Ihre Ziele Heimverbindungen anders behandeln als Server. Wenn das, was Sie tatsächlich erhalten, Datacenter-Adressraum mit einem Residential-Etikett ist, zahlen Sie einen Residential-Preis für genau das, was Sie eigentlich vermeiden wollten, und Sie werden das an einer steigenden Blockrate bemerken, nicht an irgendetwas auf der Rechnung. Gefälschte Residential-Proxys sind der teuerste Fehler in diesem Markt, gerade weil sie leise versagen.

Die gute Nachricht ist, dass sich das überprüfen lässt. Die Natur einer IP ist öffentlich einsehbar, und Sie können das selbst in wenigen Minuten anhand eines Testzugangs oder eines kleinen Erstkaufs prüfen. Im Folgenden geht es darum, worin der Unterschied wirklich besteht, warum manche Pools nicht das sind, was sie behaupten, und welche konkreten Prüfungen die beiden voneinander trennen.

Was eine IP zu einer Residential-IP macht

Eine Residential-IP ist eine Adresse, die ein privater Internetanbieter einem Haushaltsanschluss zugewiesen hat. Sie gehört zu einem ISP, der Breitband an Privatpersonen verkauft, sie liegt in einem für Endkundenzugang registrierten Adressraum, und für eine Website sieht sie wie eine gewöhnliche Person zu Hause aus, was der ganze Grund dafür ist, dass sie als risikoarm eingestuft wird. Die Details dazu stehen in der Anatomie einer Residential-IP.

Eine Datacenter-IP ist eine Adresse, die einer Hosting-Infrastruktur zugewiesen ist. Sie gehört zu einem Cloud- oder Hosting-Unternehmen, sie liegt in einem für Server registrierten Adressraum, und sie ist als solche trivial erkennbar, weil diese Registrierung öffentlich ist. Websites raten nicht, wenn sie diese Bereiche als Maschinen-Traffic behandeln, sie lesen eine Datenbank, weshalb Datacenter-Proxys auf den Zielen blockiert werden, auf denen Residential funktioniert. Der vollständige Vergleich steht in Residential vs. Datacenter-Proxys.

Der Unterschied, der kommerziell zählt: Residential-Adressen sind knapp und teuer, um sie ethisch zu beschaffen, Datacenter-Adressen sind billig und in großen Mengen verfügbar. Genau diese Preislücke ist der Grund, warum es zu Falschdeklarationen kommt.

Die Formen, die eine Falschdeklaration annimmt

Selten ist es so plump, dass ein reiner Datacenter-Pool einfach als Residential verkauft wird. Vier Muster sind verbreiteter.

Das erste ist Verdünnung: ein Pool, der teilweise tatsächlich Residential ist, in den aber Datacenter-Bereiche gemischt werden, um die beworbene Zahl aufzublähen und Nachfrage abzufedern. Ihre ersten Testanfragen mögen unauffällig aussehen, während ein erheblicher Anteil des produktiven Traffics über Server-Adressraum läuft.

Das zweite ist falsch bezeichneter, hosting-naher Adressraum, also Adressen, die einem Hosting-Anbieter oder einem Reseller gehören, aber dennoch als Residential beworben werden, weil sie nicht in den bekanntesten Cloud-Bereichen liegen. Sie sind trotzdem auf Infrastruktur registriert, und die Datenbanken, die Websites nutzen, wissen das ebenfalls.

Das dritte sind ISP-Adressen, die missverständlich verkauft werden. Statische ISP-Proxys sind ein legitimes und nützliches Produkt, gehostete Adressen, die auf einen privaten ISP registriert sind, und daran ist nichts falsch. Falsch ist, sie als rotierende Residential-Adressen zu verkaufen, ohne das zu sagen, denn sie verhalten sich anders: eine kleine, feste Menge an Adressen statt eines großen, rotierenden Pools echter Haushalte.

Das vierte sind übertriebene Angaben zur Poolgröße, bei denen die beworbene Zahl jede jemals beobachtete Adresse zählt statt dessen, was gleichzeitig in dem Land verfügbar ist, das Sie benötigen. Das ist nicht im selben Sinne gefälscht, führt aber zur selben Enttäuschung, weshalb die Poolgröße eine schwache Kennzahl ist im Vergleich zur Dichte dort, wo Sie tatsächlich erfassen.

Prüfung eins: Als was die Adresse registriert ist

Die schnellste Prüfung ist die öffentliche Registrierung. Nehmen Sie eine Handvoll Exit-Adressen aus dem Pool und schlagen Sie den ASN und die Organisation hinter jeder einzelnen nach. Ein Residential-Exit sollte zu einem privaten Internetanbieter, einem Telekommunikationsunternehmen, einem Kabel- oder Breitbandbetreiber führen, also der Art von Unternehmen, das Anschlüsse an Haushalte verkauft. Ein Datacenter-Exit führt zu einem Hosting- oder Cloud-Unternehmen.

Führen Sie diese Prüfung über eine Stichprobe durch, nicht nur über eine einzelne Adresse, denn Verdünnung ist der Normalfall, und ein einziges sauberes Ergebnis beweist nichts. Ziehen Sie fünfzig oder hundert Exits, gruppieren Sie sie nach Organisation und betrachten Sie die Verteilung. Wenn ein spürbarer Anteil zu Hosting-Anbietern gehört, haben Sie einen gemischten Pool vor sich. Es handelt sich um dieselbe ASN-Sichtbarkeit, die Carrier-Targeting überhaupt erst möglich macht, hier eingesetzt als Verifizierungswerkzeug.

import requests, collections

PROXY = "http://customer-USERNAME-country-us:PASSWORD@p.shifter.io:443"
seen = collections.Counter()

for _ in range(50):                       # sample the pool, do not trust one exit
    r = requests.get("https://ipinfo.io/json",
                     proxies={"http": PROXY, "https": PROXY}, timeout=15)
    d = r.json()
    seen[(d.get("org"), d.get("country"))] += 1

for (org, country), n in seen.most_common():
    print(f"{n:3}  {country}  {org}")     # look for hosting/cloud names in the list

Eine Liste von Organisationen, die von privaten ISPs dominiert wird, ist das gewünschte Ergebnis. Eine Liste, die mit Hosting-Unternehmen durchsetzt ist, zeigt Ihnen, was Sie wirklich kaufen.

Prüfung zwei: Was die IP-Intelligence-Datenbanken sagen

Die Registrierung ist die Grundlage, aber die praktische Frage lautet, wie die Websites, die Sie ansteuern, eine Adresse klassifizieren, und dafür nutzen sie kommerzielle IP-Intelligence-Dienste, die einen Nutzungstyp zuweisen: Residential, Hosting, Business, Mobile. Mehrere dieser Dienste bieten eine Abfrage an, die Sie direkt nutzen können, und einige Proxy-Erkennungsdienste sagen Ihnen unmittelbar, ob eine Adresse als Proxy oder als Hosting-Bereich markiert ist.

Prüfen Sie Ihre Stichprobe gegen einen oder zwei dieser Dienste und vergleichen Sie die Antwort mit der Behauptung des Anbieters. Hier lernen Sie auch etwas über IP-Reputation, was eine eigenständige Dimension neben dem Typ ist: Eine Adresse kann genuin residential sein und trotzdem stark markiert sein aufgrund früheren Missbrauchs, und ein Pool aus echten, aber verbrannten Adressen wird Sie fast genauso enttäuschen wie ein gefälschter.

Prüfung drei: Verhalten an einem echten Ziel

Der endgültige Test ist derjenige, der für Ihr Geschäft zählt, nämlich ob der Traffic auf den Websites funktioniert, die Sie tatsächlich benötigen. Registrierung und Datenbanken sind Näherungswerte für die Meinung eines Ziels; die Meinung des Ziels ist die eigentliche Wahrheit.

Wählen Sie zwei oder drei Ihrer echten Ziele aus, idealerweise darunter ein gut geschütztes, und schicken Sie ein moderates Volumen durch den Pool. Vergleichen Sie gegen eine Kontrolle, entweder einen Datacenter-Proxy oder eine direkte Verbindung, und achten Sie nicht nur auf offene Blockierungen, sondern auch auf die subtileren Fehlschläge: Challenge-Seiten, generische oder leere Antworten, abgeschnittene Listungen und Weiterleitungen, die alle mit einem 200-Status ankommen und einen Datensatz leise vergiften können, wie in Blockierten oder gefälschten Inhalt erkennen beschrieben. Wenn ein angeblich residentieller Pool auf einem Ziel, das bekanntermaßen Datacenter-Traffic blockiert, etwa so gut abschneidet wie Datacenter-Adressen, haben Sie Ihre Antwort, unabhängig davon, was eine Abfrage sagt.

Prüfung vier: Die Fragen, die ein Anbieter beantworten können sollte

Ein Teil davon ist Sorgfaltspflicht statt Messung, und die Antworten sind aufschlussreich.

Fragen Sie, woher die Adressen stammen. Ein ethisches Residential-Netzwerk beschafft seine Adressen durch informierte Zustimmung, meist über ein offengelegtes SDK oder eine App-Vereinbarung, bei der der Teilnehmer weiß, dass seine Verbindung geteilt wird, und aussteigen kann, und ein Anbieter sollte diese Lieferkette ohne Unbehagen beschreiben können. Vagheit hierbei ist das größte Warnsignal, sowohl ethisch als auch praktisch, da eine nicht offengelegte Beschaffung tendenziell mit Pools korreliert, die markiert werden. Das ist auch für die Compliance relevant, wie in DSGVO und Residential-Proxys und in dem Beitrag zur ethischen Beschaffung für die KI-Datenerfassung behandelt.

Fragen Sie, wie sich der Pool in den spezifischen Ländern zusammensetzt, die Sie brauchen, nicht global. Fragen Sie, ob das Produkt rotierend residential, statisch ISP oder eine Mischung ist, und erwarten Sie eine eindeutige Antwort. Fragen Sie, wie Concurrency und Rotation tatsächlich funktionieren, was mit wie Proxy-Netzwerke in der Praxis funktionieren übereinstimmen sollte. Und begegnen Sie einem kostenlosen oder verdächtig günstigen Residential-Angebot mit der gebotenen Skepsis, denn echte Residential-Verfügbarkeit hat eine reale Kostenuntergrenze, und alles deutlich darunter wird durch etwas subventioniert, meist durch die Qualität des Pools oder die Zustimmung der beteiligten Personen, was das Argument in kostenlose versus bezahlte Proxys ist.

Eine kurze Verifizierungsroutine

Bevor Sie sich für einen Anbieter entscheiden, gehen Sie diese Schritte der Reihe nach durch. Ziehen Sie eine Stichprobe von fünfzig bis hundert Exits und gruppieren Sie sie nach ASN und Organisation, um Hosting-Namen im Mix zu erkennen. Prüfen Sie eine Teilmenge gegen eine IP-Intelligence-Abfrage auf Nutzungstyp und Proxy-Markierungen. Schicken Sie echten Traffic gegen zwei oder drei Ihrer eigenen Ziele, darunter ein geschütztes, und messen Sie die Erfolgsrate mit Antwortvalidierung statt nur mit Statuscodes. Bestätigen Sie, dass die Geografie, für die Sie bezahlt haben, auch die Geografie ist, die Sie erhalten, denn ein Pool, der in Ihrem Land dünn ist, wird Sie enttäuschen, selbst wenn jede Adresse tatsächlich residential ist. Und stellen Sie die Frage zur Beschaffung direkt. Die vollständige Messmethodik steht in Geschwindigkeit, Erfolgsrate und Standortgenauigkeit testen.

Nichts davon dauert lange, und es vorab zu tun, bevor Sie skalieren, ist weit günstiger, als die Antwort über einen Monat verschlechterter Datenerfassung herauszufinden.

Das Fazit

Residential- und Datacenter-Adressen unterscheiden sich auf eine Weise, die öffentlich dokumentiert ist, was bedeutet, dass „Ist dieser Pool wirklich residential“ eine Frage mit einer überprüfbaren Antwort ist, keine Vertrauensfrage. Nehmen Sie eine Stichprobe des Pools und betrachten Sie die Organisationen hinter den Exits, prüfen Sie den Nutzungstyp gegen IP-Intelligence, und testen Sie dann an Ihren eigenen Zielen mit ordentlicher Antwortvalidierung, denn das Urteil des Ziels ist das einzige, das zählt. Fragen Sie, woher die Adressen stammen, und erwarten Sie eine klare Antwort. Ein Anbieter, der echten Residential-Zugang verkauft, hat keinen Grund, dabei vage zu sein, und einer, der vage ist, hat Ihnen etwas Nützliches mitgeteilt.

Wenn Sie diese Prüfungen an einem Pool durchführen möchten, der sie sauber beantwortet, dafür stehen Residential-Proxys, echte Adressen in Heimqualität mit Länder- und Städte-Targeting, und die Abrechnung pro GB bedeutet, dass ein Verifizierungslauf Sie nur die genutzte Bandbreite kostet und nichts weiter.