ガイド、チュートリアル＆ インサイト
Shifterチームが提供するレジデンシャルプロキシ、ウェブスクレイピング、データ収集戦略、業界のベストプラクティスについて学ぶ。
レイオフと労働力の変化をリアルタイムで追跡する方法
レイオフは見出しになる前と後に、公開された兆候の痕跡を残す。WARN通知、届出書類、ニュース、採用データを組み合わせて、信頼できるイベントフィードを構築する方法。
Matt Brown · 2026年9月19日 プロキシ経由のライブWebデータでLLMエージェントをグラウンディングする
グラウンディングは、エージェントの回答を引用可能なソースに結び付けます。グラウンディングとは何か、ライブWebグラウンディングループがどのように機能するか、そしてそれが静かに壊れる箇所について。
James Meadow · 2026年9月18日 オープンウェブから大規模トレーニングデータセットを構築する方法
ページを収集すること自体は簡単な部分にすぎません。オープンウェブのクロールをトレーニングコーパスに変える方法として、フロンティア、オプトアウト、抽出、フィルタリング、重複排除、汚染除去について解説します。
Matt Brown · 2026年9月18日 ウェブデータセット内のAI生成コンテンツを検出・フィルタリングする方法
単独でAI生成テキストを確実に見抜ける検出器は存在しない。MLチームがプロベナンス、ソース、重複、統計的シグナルを組み合わせてウェブデータセットをフィルタリングする方法。
Chris Collins · 2026年9月18日 コンタクトおよび企業エンリッチメント:データソース+プロキシインフラストラクチャ
データエンリッチメントは、すでに保有しているレコードのギャップを埋めます。各エンリッチメントタイプに必要なもの、データの出所、そしてプロキシインフラストラクチャが果たす役割について解説します。
James Meadow · 2026年9月17日 Webスクレイピングによる B2Bリードデータベースの構築(コンプライアンス対応かつスケーラブルに)
リードデータベースとは、メールアドレスのリストではなく、連絡先が紐づいたアカウントモデルである。コンプライアンスをスキーマに組み込みながら、公開情報源から構築する方法を解説する。
Chris Collins · 2026年9月17日 ダークウェブとペーストサイトを監視して漏洩認証情報を発見する方法
認証情報の漏洩の大半は、隠されたマーケットではなくペーストサイトや公開チャンネルに現れます。それらを監視し、発見した情報をトリアージし、法の範囲内にとどまる方法を解説します。
James Meadow · 2026年9月16日 不正対策チームがレジデンシャルIPシグナルでアカウント乗っ取りを検知する方法
レジデンシャルIPはもはや実在の顧客を意味しない。不正対策チームがジオ、ネットワーク、速度、整合性のシグナルを組み合わせてアカウント乗っ取りを検知する方法。
Chris Collins · 2026年9月16日 市場間でのジオパーソナライズと動的価格設定を検出する方法
価格は場所、時間、人によって変動するが、単一の観測ではどれが原因かを判別できない。3つを切り分けるための、対にした管理された検証を設計する方法。
Matt Brown · 2026年9月16日