Eine Erfolgsquote in der Überschrift nennt selten die Website, auf der sie gemessen wurde. Wenn doch, handelt es sich meist um eine ungeschützte Testseite, auf der fast jedes Proxy-Netzwerk hervorragend aussieht. Diese Zahl sagt wenig darüber aus, wie sich dasselbe Netzwerk bei einer Suchmaschine, einem Marktplatz oder einem KI-Assistenten schlägt.
Wenn Sie Residential Proxys für den produktiven Einsatz auswählen, lautet die nützliche Frage nicht „Wie hoch ist die Erfolgsquote dieses Netzwerks?“, sondern „Wie hoch ist sie auf Websites wie meiner?“. Dieser Leitfaden erklärt, warum sich die Antwort von Website zu Website so stark unterscheidet und wie die Atlas-Seite „Targets“ aufgebaut ist, um sie zu beantworten.
Eine einzelne Zahl verdeckt die Streuung
Stellen Sie sich zwei Netzwerke vor. Auf einer schlichten Seite ohne Schutzmaßnahmen bestehen beide fast jede Anfrage. Bei einer Suchmaschine besteht das eine weiterhin die meisten Anfragen, während das andere bei einem großen Teil per Challenge gestoppt wird. Mittelt man beide Ziele, sehen beide Netzwerke ordentlich aus, und das einzige Ergebnis, das sie unterscheidbar gemacht hätte, ist verloren.
Dies ist das übliche Muster und kein Randfall. Netzwerke wirken auf einfachen Seiten ähnlich und driften auseinander, je härter die Schutzmaßnahmen werden. Eine einzelne gemischte Quote misst vor allem, wie einfach die Testziele waren.
Was verschiedene Websites tatsächlich prüfen
Websites führen nicht alle dieselbe Prüfung durch. Jede Art von Schutz betrachtet eine andere Eigenschaft der Anfrage und deckt damit eine andere Schwäche auf:
- Ungeschützte Seiten bewerten nichts. Ein Fehlschlag dort liegt am Proxy-Netzwerk selbst: eine abgebrochene Verbindung, ein langsames Gateway, ein Timeout.
- Marktplätze setzen mäßige Bot-Abwehr auf Preis- und Bestandsseiten ein, also bei der häufigsten Scraping-Aufgabe.
- Suchmaschinen stellen Adressen infrage, die sich viele Kunden teilen, und decken so zu stark ausgelastete Pools auf.
- Öffentliche Profilseiten weisen bekannte Proxy-Bereiche und Hosting-Netzwerke ab, was prüft, wie residential ein Pool tatsächlich ist.
- App-Endpunkte prüfen neben der Adresse auch die Verbindung und erkennen Exits, die nur residential wirken.
- Verwaltete Challenges bewerten die Reputation der Exit-Adresse, bevor sie etwas ausliefern.
- Warteschlangen mit hohem Andrang verteidigen sich am härtesten und lassen nur saubere, selten genutzte Exits durch.
Unsere Abfrage des Anti-Bot-Stacks zeigt, wie Sie herausfinden, welche dieser Schutzmaßnahmen eine Website absichert, bevor Sie etwas dagegen aufbauen.
Einfache Seiten testen das Netzwerk, harte Seiten den Pool
Ergebnisse pro Ziel lassen sich sinnvoll lesen, indem man sie in zwei Gruppen teilt.
Die Baseline-Ziele sagen etwas über das Netzwerk aus: sein Gateway, sein Routing und seine Verfügbarkeit. Scheitert ein Netzwerk an einer ungeschützten Seite, erklärt nichts am Ziel den Fehler.
Die geschützten Ziele sagen etwas über den Pool aus: wie sauber die Adressen sind, wie viele Kunden sie teilen und ob es tatsächlich Heimanschlüsse sind. Hier geben die meisten Käufer ihr Geld aus, und hier unterscheiden sich die Netzwerke am stärksten.
Die Differenz zwischen beiden ist die aussagekräftigste Zahl auf der Seite. Ein Netzwerk, das bei der Baseline nahe der Spitze liegt und bei geschützten Zielen stark abfällt, hat ein zuverlässiges Gateway und einen verbrauchten Pool.
Geschützte Websites trennen die Netzwerke deshalb so deutlich, weil sie die Adresse beurteilen und nicht nur die Anfrage. Ein echter Residential Proxy-Exit ist ein Heimanschluss mit einem Endkunden-ISP dahinter, und die meisten Schutzmaßnahmen räumen einer solchen Adresse einen Vertrauensvorschuss ein. Eine Adresse, die sich viele Kunden teilen, die schnell wiederverwendet wird oder auf ein Hosting-Unternehmen registriert ist, verliert diesen Vorschuss. Auf einer ungeschützten Seite fällt das nicht auf. Bei einer Suchmaschine oder einer verwalteten Challenge entscheidet es über den Großteil des Ergebnisses.
Rangfolgen ändern sich je nach Ziel
Da jedes Ziel etwas anderes prüft, steht die Reihenfolge der Netzwerke nicht fest. Ein Netzwerk kann bei Marktplatzseiten vorn liegen und bei der Suche zurückfallen, oder umgekehrt. Besteht Ihre Arbeitslast überwiegend aus einer Art von Website, ist die Gesamtrangfolge weniger wichtig als die Spalte für diese Art von Website.
Der Vergleich nach Ziel stellt zwei Netzwerke bei jedem Ziel nebeneinander, sodass sich solche Umkehrungen leicht erkennen lassen.
Warum Ergebnisse pro Ziel ein kurzes Zeitfenster nutzen
Websites ändern ihre Schutzmaßnahmen oft, manchmal mehrmals pro Woche. Ein Monatsdurchschnitt für ein Ziel würde mehrere verschiedene Schutzzustände zu einer Zahl vermischen, die keinen davon beschreibt.
Deshalb wird der Erfolg pro Ziel bei Atlas über die letzten 24 Stunden angegeben, während die Gesamtrangfolge ein längeres Zeitfenster verwendet. Die Methodik zu den Zeitfenstern erklärt, welche Kennzahlen welchen Zeitraum nutzen und warum.
So lesen Sie die Seite „Targets“
Die Seite „Targets“ listet jedes Ziel vom einfachsten bis zum schwierigsten auf, jeweils mit der schriftlich festgelegten Bestehensregel, und zeigt dann den Erfolg jedes Netzwerks bei jedem Ziel in einer Tabelle. So gehen Sie vor:
- Suchen Sie das Ziel, das Ihrem eigenen am nächsten kommt. Vergleichen Sie die Art des Schutzes, nicht die Marke der Website.
- Lesen Sie zuerst diese Spalte. Betrachten Sie den Gesamtdurchschnitt als Kontext, nicht als Antwort.
- Vergleichen Sie mit der Baseline. Ein starker Abfall von der schlichten Seite zu Ihrem Ziel deutet auf den Pool hin.
- Prüfen Sie die Bestehensregel. Stellen Sie sicher, dass sie dieselbe Art von Nachweis prüft, die Sie benötigen.
- Behandeln Sie N/A als ungetestet. Ein Netzwerk, das noch nicht an ein Ziel gesendet wurde, wird nicht mit null bewertet und sollte weder als Fehlschlag noch als Erfolg gelesen werden.
Tests auf Ihrer eigenen Website
Kein gemessenes Ziel ist Ihr Ziel. Nutzen Sie Atlas, um eine engere Auswahl zu erstellen, und bestätigen Sie diese anschließend an Ihrer eigenen Arbeit:
- Senden Sie jedem Kandidaten dieselben Anfragen, von denselben Standorten und zur selben Zeit.
- Beurteilen Sie jede Antwort anhand einer schriftlichen Bestehensregel und nicht anhand eines Statuscodes.
- Testen Sie lange genug, um mehr als einen Schutzzustand zu erfassen, mindestens einige Tage.
- Weisen Sie Ihr eigenes Ziel getrennt von jeder einfachen Kontrollseite aus.
Fehlt die Art von Website, von der Sie abhängen, in der Testsuite, schlagen Sie sie aus der Liste der kommenden Ziele am Ende der Seite „Targets“ vor. Ein Ziel erhält einen Platz, wenn sich seine Bestehensregel per Code prüfen lässt und sein Ergebnis nicht bereits durch ein Ziel in der Suite vorhergesagt wird. Wenn Sie es bereits selbst gemessen haben, können Sie Ihre eigenen Testergebnisse teilen und Atlas zur Verfügung stellen.