JavaScript 渲染
按需提供完整的无头 Chrome。可等待 CSS 选择器、执行脚本、在捕获前滚动或点击。
网络抓取 API
发送一个 URL,获取渲染后的 HTML 或解析后的 JSON。一个端点即可处理代理轮换、无头 Chrome、JavaScript 执行、CAPTCHA 解决和重试。
自动重试 + CAPTCHA
失败或被阻止的请求会使用不同的代理自动重试。reCAPTCHA 和 hCaptcha 会在请求过程中被解决。
提取规则
返回解析后的 JSON 而非原始 HTML。可为每个字段定义 CSS 选择器,无需下游解析器。
住宅 + 移动网络
Growth 及以上套餐可通过超过 2.05 亿的住宅 IP 池以及移动 IP 进行路由。支持全球地理定位。
https://scrape.shifter.io/v1?api_key=YOUR_API_KEY&url=<TARGET_URL>以查询字符串的形式添加参数。其余的一切(代理选择、浏览器、重试)都由系统为你处理。
curl "https://scrape.shifter.io/v1?api_key=YOUR_API_KEY&url=https://example.com&render_js=1"返回完全渲染后的 HTML。添加 extract_rules 可获取结构化 JSON:
curl "https://scrape.shifter.io/v1?api_key=YOUR_API_KEY&url=https://example.com&extract_rules=%7B%22title%22%3A%7B%22selector%22%3A%22h1%22%2C%22output%22%3A%22text%22%7D%7D"
# {"title": "Example Domain"}| 套餐 | 额度 | 并发数 | 价格 | 代理池 |
|---|---|---|---|---|
| Starter | 100K | 20 | $44/月 | 数据中心 (美国/欧盟) |
| Growth | 1M | 50 | $134/月 | 住宅 + 移动网络 |
| Business | 3M | 100 | $269/月 | 住宅 + 移动网络 |
| Enterprise | 10M | 500 | $719/月 | 住宅 + 移动网络 |
1 额度 = 1 次成功请求。失败的请求不计费。查看实时价格。