Guias, Tutoriais e Insights
Aprenda sobre proxies residenciais, web scraping, estratégias de coleta de dados e as melhores práticas do setor com a equipe do Shifter.
Como Usar Proxies Residenciais no Puppeteer (Incluindo page.authenticate)
Proxies no Puppeteer: o proxy vai nos launch args, as credenciais no page.authenticate, rotação geográfica por página através de um único gateway, e bloqueio de recursos.
Chris Collins · 5 de agosto de 2026 O Estado do Web Scraping em 2026
A IA tornou a coleta de dados estratégica, o anti-bot passou para o nível de rede, os bloqueios ficaram invisíveis, os preços migraram para banda. Onde está o web scraping em 2026.
James Meadow · 3 de agosto de 2026 Como Usar Proxies Residenciais em C# com HttpClient
Proxies em C#: WebProxy com NetworkCredential, SocketsHttpHandler e PooledConnectionLifetime, IHttpClientFactory, e clientes por identidade para rotação geográfica.
Chris Collins · 2 de agosto de 2026 Construir vs Comprar: Você Deveria Rodar Sua Própria Infraestrutura de Scraping?
Um scraper de demonstração leva uma tarde. Rodá-lo em escala é um produto. Uma estrutura para o que construir, o que comprar e a única camada que você deve sempre alugar.
Chris Collins · 1 de agosto de 2026 Como Usar Proxies Residenciais em Node.js com Axios e Got
Proxies em Node.js: por que o Axios precisa de https-proxy-agent e proxy:false, a opção agent do Got, o ProxyAgent do undici para fetch, e rotação geográfica por requisição.
Chris Collins · 29 de julho de 2026 Como Escalar Workloads de Scraping com Proxies Residenciais Usando Kubernetes
Execute o scraping no Kubernetes: credenciais de proxy como Secrets, identidade de sessão por pod via Downward API, autoscaling orientado por fila e encerramento gracioso.
Chris Collins · 28 de julho de 2026 Como Usar Proxies Residenciais em PHP com cURL e Guzzle
Proxies em PHP: CURLOPT_PROXY e CURLOPT_PROXYUSERPWD do cURL, a opção proxy do Guzzle, CURLOPT_HTTPPROXYTUNNEL e rotação geográfica por requisição.
Chris Collins · 26 de julho de 2026 Como Usar Proxies Residenciais em Java com OkHttp e Apache HttpClient
Proxies em Java: a pegadinha do proxyAuthenticator do OkHttp, o limite padrão de 5 conexões por rota do Apache HttpClient, consumo de entidade e rotação de geolocalização por requisição.
Chris Collins · 25 de julho de 2026 Como Usar Proxies Residenciais em Go com net/http e Colly
Proxies em Go: configuração de transport, as pegadinhas do body-drain e MaxIdleConnsPerHost que matam a reutilização de conexão, rotação geográfica por requisição e o SetProxyFunc do Colly.
Chris Collins · 24 de julho de 2026