ガイド、チュートリアル& インサイト
Shifterチームが提供するレジデンシャルプロキシ、ウェブスクレイピング、データ収集戦略、業界のベストプラクティスについて学ぶ。
インドのDPDP法と公開データ:ウェブデータへの意味
インドのデータ保護法は一部の公開個人データを除外していますが、すべてではありません。DPDP法が定める内容、施行時期、データチームが準備すべきことについて解説します。
データソースとしてのウェブアーカイブ: Wayback Machineでわかること、わからないこと
Wayback Machineは1兆件を超えるキャプチャを保有している。その検索方法、カバレッジと品質が不十分な点、そして近年より多くのサイトがアクセスを拒否するようになった理由について。
プロキシ形式を解説:user:pass@host:port、host:port:user:passほか
同じプロキシでも書き方は5通りある。curl、Python、Playwright、一括処理ツールがそれぞれ想定する形式、使用すべきスキーム、そして相互変換の方法を解説する。
プロキシ管理機能を内蔵したスクレイピングフレームワーク:それぞれが何を処理するか
Scrapy、Crawlee、Colly、Playwright、Puppeteer、Seleniumのプロキシサポートを比較:ローテーション、セッションと認証情報、そしてローテーティングゲートウェイが何を変えるか。
リテールメディア広告:複数市場でのスポンサー掲載の検証
リテールメディアは米国で634億ドル規模のチャネルだが、その大部分は販売元である小売業者自身によって計測されている。何が監査され、何がされていないのか、そして自社の掲載を確認する方法とは。
AIショッピングエージェント:エージェント型チェックアウトが商品データにもたらす変化
ChatGPT、GoogleそしてAmazonは今や買い物客のために商品を見つけて購入する。AIエージェントが何を表示するかをどう選ぶのか、なぜ回答が市場によって異なるのか、そしてデータをどう準備すべきか。
英国データ(利用及びアクセス)法:ウェブデータに何をもたらすか
英国の2025年データ法はすでにその大部分が施行されている。適法根拠や通知から、研究・AIに至るまで、公開ウェブデータを収集するチームに何が変わるのか。
Google AIモードとランキング追跡:「ランキング」が意味するもの
AIモードは10本の青いリンクではなく、引用付きで回答する。Search Consoleが何をカウントするのか、引用が日々変動する理由、そして揺るがない可視性を追跡する方法とは。