Sticky Sessions werden nach Dauer verkauft. Ein Anbieter bietet Sessions von 10, 30 oder 60 Minuten an, und der Käufer wählt diejenige, die seinen längsten Login, Checkout oder Crawl abdeckt. Die Zahl auf der Tarifseite liest sich wie ein Versprechen. Das ist sie aber nicht.
Eine angegebene Sticky-Session-Dauer ist die längste Dauer, die eine Session erreichen kann. Wie lange sie tatsächlich hält, hängt vom Gerät hinter dem Exit ab, und bei Residential Proxys gehört dieses Gerät einer realen Person. Dieser Leitfaden erklärt, warum Sessions vorzeitig enden, wie Sie das messen und wie Atlas es ausweist.
Was eine Sticky Session ist
Ein rotierender Residential Proxy vergibt für jede Anfrage oder für jeden kurzen Schub eine neue Exit-IP. Eine Sticky Session weist das Gateway an, Ihre Anfragen für eine festgelegte Zeit über denselben Exit zu senden, meist indem eine Session-ID in den Proxy-Benutzernamen eingetragen wird. Wenn Sie den Mechanismus selbst noch einmal nachlesen möchten, finden Sie ihn im Glossareintrag zu Sticky Sessions.
Sticky Sessions gibt es, weil manche Ziele Zustände an eine Adresse binden. Ein Login, ein Warenkorb, ein mehrseitiges Formular oder eine seitenweise Suche kann abbrechen oder eine Sicherheitsprüfung auslösen, wenn sich die IP mittendrin ändert. Bei solchen Aufgaben lautet die Frage nicht „Wie lang ist die Session?“, sondern „Wie oft hält sie so lange, wie ich sie brauche?“.
Warum die angegebene Dauer eine Obergrenze ist
Das Gateway kann Sie nur so lange auf einem Exit halten, wie dieser Exit existiert. Ein Residential Exit ist ein Gerät in einem Heim- oder Mobilfunknetz, und solche Geräte verschwinden ständig:
- Der Besitzer schaltet das Gerät aus, schließt die App, die seine Bandbreite teilt, oder versetzt es in den Ruhezustand.
- Ein Telefon wechselt vom WLAN ins Mobilfunknetz oder von einem Netz in ein anderes.
- Der Router zu Hause startet neu, oder der Internetanbieter weist dem Haushalt eine neue Adresse zu.
- Das Gateway stuft den Exit als überlastet oder instabil ein und leitet Sie auf einen anderen um.
Keiner dieser Vorgänge richtet sich nach Ihrem Session-Timer. Eine 30-Minuten-Session auf einem Gerät, das nach 8 Minuten offline geht, endet nach 8 Minuten. Der Anbieter lügt nicht bei der Dauer; er nennt die Einstellung, und die Einstellung ist eine Obergrenze.
Deshalb sagt es die Methodikseite unmissverständlich: Angegebene TTLs sind Obergrenzen, und die Lücke zwischen der Obergrenze und dem, was Sie tatsächlich bekommen, wird fast nie offengelegt.
Die zwei Arten, wie eine Session endet
Wenn ein Exit verschwindet, tut das Gateway eines von zwei Dingen.
Es scheitert sichtbar. Ihre nächste Anfrage liefert einen Proxy-Fehler, einen Verbindungsabbruch oder ein Timeout. Das ist lästig, aber Ihr Code weiß, dass etwas passiert ist, und kann eine neue Session starten.
Es tauscht unbemerkt. Das Gateway leitet Ihre nächste Anfrage über einen anderen Exit und macht weiter, mit derselben Session-ID und ohne Fehler. Ihr Code glaubt, noch auf derselben Adresse zu sein. Das Ziel sieht mitten in der Session eine neue IP, und Ihr Login wird abgemeldet, Ihr Warenkorb geleert oder Ihr Konto markiert.
Der unbemerkte Tausch ist der schädlichere Fall, denn nichts in der Antwort verrät, dass er stattgefunden hat. Man erkennt ihn nur, indem man die Exit-IP bei jeder Anfrage selbst prüft und mit der IP vergleicht, mit der die Session begonnen hat.
Haltequote: die Kennzahl, auf die es ankommt
Da die Dauer eine Obergrenze ist, beschreibt die Haltequote ein Sticky-Produkt am besten: der Anteil der Sessions, die über die gesamte angegebene Dauer dieselbe Exit-IP behalten haben.
Angenommen, Sie öffnen 100 Sessions mit je 30 Minuten. Behalten 85 davon ihre Start-IP die vollen 30 Minuten, beträgt die Haltequote 85%. Die übrigen 15 endeten vorzeitig, ob sie nun laut scheiterten oder still getauscht wurden. Zwei Anbieter mit gleicher angegebener Dauer können sehr unterschiedliche Haltequoten haben, und die Haltequote sagt voraus, wie viele Ihrer Sessions Sie neu starten müssen.
Atlas testet Sticky-Residential-Produkte mit derselben Testreihe wie rotierende, ergänzt um die TTL-Verifizierung: Jede Session wird über ihre gesamte angegebene Dauer gehalten, und es wird festgehalten, ob die Exit-IP, die das Ziel sah, bestehen blieb. Die Session-Einstellungen bleiben auf den Standardwerten des jeweiligen Anbieters, sodass die Kennzahl das Produkt so beschreibt, wie es verkauft wird. Das Ergebnis erscheint als „Sticky sessions held“ im direkten Vergleich. Es stammt aus der jüngsten vollständigen Bewertung und liest sich daher unabhängig vom gewählten Zeitfenster gleich, und für ein Netz, in dem es nicht gemessen wurde, zeigt es N/A an, statt es als null zu zählen.
Eine Haltequote richtig lesen
Eine Haltequote braucht etwas Kontext, um nützlich zu sein.
Sie hängt von der gewünschten Dauer ab. Längere Sessions geben Geräten mehr Zeit auszufallen, deshalb liegt die Haltequote bei 60 Minuten im selben Netz meist niedriger als bei 10 Minuten. Vergleichen Sie Gleiches mit Gleichem.
Kurz ist oft besser als lang. Wenn Ihr Job 5 Minuten braucht, fordern Sie eine Session an, die nicht viel länger ist. Eine lange Session bringt nichts mehr, sobald die Arbeit erledigt ist, und hält Sie auf einem Exit, der womöglich unzuverlässiger wird.
Der Standort verkleinert den Pool. Eine Session, die auf eine kleine Stadt festgelegt ist, hat weniger Geräte zur Auswahl, und das Gateway hat weniger Alternativen, wenn eines ausfällt. Rechnen Sie damit, dass die Haltequote je nach Land schwankt.
Sie ist nicht dasselbe wie das Rotationsverhalten. Atlas weist für rotierende Produkte außerdem die Anfragen pro Exit-IP aus, die zeigen, wie lange ein „rotierender“ Exit tatsächlich an seinem Platz bleibt. Das ist eine andere Frage: ob die Rotation dann stattfindet, wenn sie soll, und nicht, ob eine Session dann hält, wenn sie soll.
Jobs so gestalten, dass sie frühe Abbrüche überstehen
Auch eine hohe Haltequote bedeutet, dass manche Sessions vorzeitig enden. Planen Sie das ein:
- Prüfen Sie die Exit-IP bei jeder Anfrage. Vergleichen Sie sie mit der IP, mit der die Session begonnen hat. Eine Änderung bedeutet das Ende einer Session, unabhängig vom Statuscode.
- Halten Sie die Arbeit pro Session kurz. Teilen Sie lange Abläufe in Schritte auf, die sich wieder aufnehmen lassen. Je kürzer der Schritt, desto weniger kostet eine abgebrochene Session.
- Sichern Sie den Zustand laufend. Cookies, Tokens und die aktuelle Seite sollten die Session überdauern, damit eine neue Session dort weitermachen kann, wo die alte aufgehört hat.
- Fordern Sie die Dauer an, die Sie brauchen, nicht das Maximum. So bleiben Sie auf frischeren Exits, und Ihre Haltequote fällt in der Praxis höher aus.
- Starten Sie sauber neu. Wenn eine Session endet, öffnen Sie eine neue Session-ID, statt es auf der alten erneut zu versuchen.
Für Arbeiten mit vielen Logins geht der Beitrag Websites scrapen, die einen Login erfordern genauer darauf ein, wie Sie Konten an Sessions binden und Cookies am Leben halten. Wenn Sie noch entscheiden, ob ein Job überhaupt Sticky Sessions braucht, behandelt Sticky vs. rotierende Residential Proxys die Abwägung.
Sticky Sessions eines Anbieters selbst testen
- Öffnen Sie mindestens 50 Sticky Sessions in der Dauer, die Sie nutzen wollen, verteilt über einen Tag, damit Sie sowohl stark als auch schwach ausgelastete Zeiten erfassen.
- Senden Sie in jeder Session jede Minute eine leichte Anfrage an einen Endpunkt, der die gesehene IP zurückgibt.
- Halten Sie die Start-IP fest sowie die Minute, in der sich die zurückgegebene IP erstmals änderte oder eine Anfrage erstmals fehlschlug.
- Zählen Sie die Sessions, die ihre Start-IP über die volle Dauer behalten haben. Dieser Anteil ist Ihre Haltequote.
- Tragen Sie auf, wie viele Sessions in jeder Minute noch bestanden. Der Verlauf zeigt, ob Sessions gleichmäßig ausfallen oder an einem bestimmten Punkt abfallen.
Legen Sie Ihr Ergebnis anschließend neben die Atlas-Kennzahl für denselben Anbieter. Weichen sie voneinander ab, liegt der Grund meist in der Dauer, dem Standort oder der Tageszeit Ihres Tests.