Benutzerdefinierte Cookies

Fügen Sie einem Scrape benutzerdefinierte Cookies hinzu, indem Sie einen Wsa-Cookie-Request-Header senden. Die API leitet diese Cookies genau so an die Zielseite weiter, wie Sie sie in einem Browser senden würden.

Endpoint

GET https://scrape.shifter.io/v1?api_key=YOUR_API_KEY&url=<TARGET_URL>

Parameter

Parameter	Typ	Erforderlich	Beschreibung
api_key	string	ja	Ihr Web Scraping API-Schlüssel
url	string	ja	Ziel-URL, die abgerufen werden soll
Wsa-Cookie (header)	string	nein	Durch Semikolon getrennte Cookie-Zeichenfolge, z. B. name1=value1; name2=value2.

Beispielanfrage

curl

curl "https://scrape.shifter.io/v1?api_key=YOUR_API_KEY&url=http%3A%2F%2Fhttpbin.org%2Fcookies" \
  -H "Wsa-Accept: application/json" \
  -H "Wsa-Cookie: name1=value1; name2=value2"

Python

import requests

r = requests.get(
    "https://scrape.shifter.io/v1",
    params={"api_key": "YOUR_API_KEY", "url": "http://httpbin.org/cookies"},
    headers={
        "Wsa-Accept": "application/json",
        "Wsa-Cookie": "name1=value1; name2=value2",
    },
)
print(r.json())

Node.js

import fetch from 'node-fetch';

const url = 'https://scrape.shifter.io/v1?' + new URLSearchParams({
  api_key: 'YOUR_API_KEY',
  url: 'http://httpbin.org/cookies',
});
const res = await fetch(url, {
  headers: {
    'Wsa-Accept': 'application/json',
    'Wsa-Cookie': 'name1=value1; name2=value2',
  },
});
console.log(await res.json());

Beispielantwort

{
  "cookies": {
    "name1": "value1",
    "name2": "value2"
  }
}

Siehe auch

• Benutzerdefinierte Header
• API-Anfrage