Esperando a CSS
Pasa un selector CSS a wait_for_css y la API espera hasta 10 segundos a que ese elemento aparezca antes de devolver la página. Si el selector nunca aparece, la solicitud falla y no se cobra.
Endpoint
Sección titulada «Endpoint» GET https://scrape.shifter.io/v1?api_key=YOUR_API_KEY&url=<TARGET_URL>&wait_for_css=<CSS_SELECTOR>&render_js=1
Parámetros
Sección titulada «Parámetros»| Parámetro | Tipo | Obligatorio | Descripción |
|---|---|---|---|
api_key | string | sí | Tu clave de la API de Web Scraping |
url | string | sí | URL de destino a obtener |
wait_for_css | string | sí | Selector CSS a esperar. |
render_js | integer | sí | Debe ser 1. |
timeout | integer | no | Tiempo máximo en milisegundos de espera. El valor predeterminado es 10000. |
Ejemplo de solicitud
Sección titulada «Ejemplo de solicitud»curl "https://scrape.shifter.io/v1?api_key=YOUR_API_KEY&url=https://example.com&wait_for_css=.firstHeading&render_js=1"import requests
r = requests.get("https://scrape.shifter.io/v1", params={ "api_key": "YOUR_API_KEY", "url": "https://example.com", "wait_for_css": ".firstHeading", "render_js": 1,})print(r.text)import fetch from 'node-fetch';
const url = 'https://scrape.shifter.io/v1?' + new URLSearchParams({ api_key: 'YOUR_API_KEY', url: 'https://example.com', wait_for_css: '.firstHeading', render_js: '1',});const res = await fetch(url);console.log(await res.text());Ejemplo de respuesta
Sección titulada «Ejemplo de respuesta»<!doctype html><html><head> <title>Example Domain</title></head><body><div> <h1>Example Domain</h1> <p>This domain is for use in illustrative examples in documents.</p></div></body></html>