A headline success rate rarely names the site it was measured on の訳:
見出しの成功率は、それがどのサイトで測定されたものかを示していないことがよくあります。示している場合でも、たいていは防御のないテストページで、ほぼどのプロキシネットワークでも優秀に見えるものです。その数字からは、同じネットワークが検索エンジン、マーケットプレイス、AIアシスタントでどの程度の結果を出せるのかは、ほとんど分かりません。
実際の業務でレジデンシャルプロキシを選ぶ場合、本当に役立つ問いは「このネットワークの成功率はいくつか」ではなく「自分のサイトに近いサイトでの成功率はいくつか」です。このガイドでは、その答えがサイトごとに大きく変わる理由と、Atlas の Targets ページがその答えを示すためにどのように作られているかを説明します。
1つの数字はばらつきを隠します
2つのネットワークを思い浮かべてください。防御のない単純なページでは、どちらもほぼすべてのリクエストを通します。検索エンジンでは、一方はほとんどのリクエストを通し続け、もう一方は大きな割合でチャレンジを受けます。2つのターゲットを平均すると、どちらも悪くない数字になり、両者を見分けられたはずの唯一の結果が失われてしまいます。
これは例外ではなく、よくあるパターンです。ネットワークは簡単なページでは似た結果になり、防御が厳しくなるほど差が開く傾向があります。1つにまとめた成功率は、主にテストターゲットがどれだけ簡単だったかを表しているにすぎません。
サイトごとに実際に何を判定しているか
すべてのウェブサイトが同じチェックを行っているわけではありません。防御の種類ごとにリクエストの異なる性質を見ているため、それぞれが異なる弱点を明らかにします。
- 防御のないページは何も判定しません。そこでの失敗はプロキシネットワーク自体に原因があります。接続の切断、ゲートウェイの遅さ、タイムアウトなどです。
- マーケットプレイスは、価格や在庫のページに中程度のボット対策を適用しています。これは最も一般的なスクレイピング業務です。
- 検索エンジンは、多くの顧客が共有しているアドレスにチャレンジを課すため、使われすぎているプールを露呈させます。
- 公開プロフィールページは、既知のプロキシ範囲やホスティングネットワークを拒否するため、プールがどれほど本当にレジデンシャルであるかを試します。
- アプリのエンドポイントは、アドレスだけでなく接続そのものも確認し、見た目だけがレジデンシャルの出口を見抜きます。
- マネージドチャレンジは、何かを返す前に出口アドレスの評判をスコア化します。
- 高競合のキューは最も防御が厳しく、クリーンでほとんど使われていない出口だけを通します。
どの防御がサイトを守っているかは、何かを構築する前に調べておくことができます。その方法は、アンチボットスタック検索で紹介しています。
簡単なページはネットワークを試し、難しいページはプールを試します
ターゲットごとの結果は、2つに分けて読むと役に立ちます。
ベースラインのターゲットは、ネットワークそのものについて教えてくれます。ゲートウェイ、ルーティング、稼働率です。防御のないページでネットワークが失敗するなら、ターゲット側にその理由はありません。
防御のあるターゲットは、プールについて教えてくれます。アドレスがどれだけクリーンか、何人の顧客が共有しているか、本当に家庭の回線かどうかです。多くの購入者が費用をかけるのはここであり、ネットワーク間の差が最も大きく出る部分でもあります。
この2つの差は、ページ上で最も情報量の多い数字です。ベースラインでは上位にいるのに、防御のあるターゲットで大きく落ち込むネットワークは、ゲートウェイは信頼できても、プールは疲弊していると言えます。
防御のあるサイトでネットワークの差がこれほどはっきり出るのは、リクエストだけでなくアドレスそのものを判定しているからです。本物のレジデンシャルプロキシの出口は、一般消費者向けISPの背後にある家庭の回線であり、ほとんどの防御はそのようなアドレスを疑わずに扱います。多くの顧客に共有されているアドレス、すぐに使い回されるアドレス、ホスティング会社に登録されているアドレスは、その扱いを受けられなくなります。防御のないページではこれは表に出ません。検索エンジンやマネージドチャレンジでは、結果の大部分がこれで決まります。
ランキングはターゲットによって変わります
ターゲットごとに判定する内容が違うため、ネットワークの順位は固定されません。マーケットプレイスのページでは首位でも検索では下位になったり、その逆になったりすることがあります。業務の大半が1種類のサイトであれば、総合ランキングよりも、そのサイトに対応する列のほうが重要です。
ターゲット別の比較では、すべてのターゲットで2つのネットワークを並べて表示するため、こうした逆転を簡単に見つけられます。
ターゲットごとの結果で短い期間を使う理由
サイトは防御を頻繁に変更し、週に数回変えることもあります。1つのターゲットで1か月の平均を取ると、複数の異なる防御状態が1つの数字に混ざり、そのどれも説明しない値になってしまいます。
このため、Atlas のターゲットごとの成功率は直近24時間で報告され、総合ランキングにはより長い期間が使われます。どの数字にどの期間を使うか、その理由は期間に関する方法論で説明しています。
Targets ページの読み方
Targetsページでは、すべてのターゲットを簡単なものから難しいものの順に、それぞれの合格ルールの文面とともに一覧し、続けて全ネットワークの全ターゲットでの成功率を1つの表にまとめています。使い方は次のとおりです。
- **自分のターゲットに最も近いものを見つけます。**サイトのブランドではなく、防御の種類で合わせてください。
- **まずその列を読みます。**総合平均は答えではなく、背景情報として扱ってください。
- **ベースラインと比較します。**単純なページから自分のターゲットにかけて大きく落ち込む場合は、プールに原因があると考えられます。
- **合格ルールを確認します。**必要とする証拠と同じ種類のものを検証するルールであることを確かめてください。
- **N/A は未テストとして扱います。**まだそのターゲットに送られていないネットワークは、0としてスコア化されません。失敗とも合格とも読まないでください。
自分のサイトでテストする
測定されたどのターゲットも、あなた自身のターゲットではありません。Atlas で候補の短いリストを作り、自分の業務で確認してください。
- 各候補に、同じリクエストを、同じ場所から、同じ時刻に送ります。
- すべてのレスポンスを、ステータスコードではなく、文面化した合格ルールで判定します。
- 複数の防御状態を捉えられるだけの期間、少なくとも数日間は実行します。
- 自分のターゲットの結果は、簡単な対照ページとは別に報告します。
頼りにしているサイトの種類がスイートに含まれていない場合は、Targets ページの末尾にある今後のターゲットの一覧から提案してください。ターゲットが採用されるのは、合格ルールをコードで検証でき、その結果がスイート内の既存のターゲットからすでに予測できない場合です。すでに自分で測定済みの場合は、自分のテスト結果を共有して Atlas に提供することもできます。