すべてのプロキシプロバイダーが、速度に関する謳い文句を掲げています。応答時間を示すところもあれば、「ping」を示すところもあり、単に「最速」と言うだけのところもあります。これらの数字が厳密に間違っていることはほとんどありません。ただし、利用できる中で最も有利な方法で測定されたうえで、別の方法で測定された数字と比較されています。
速度を一つの判断材料としてレジデンシャルプロキシを選ぶ場合、大切なのは最小の数字を探すことではありません。それぞれの数字が何を測ったのかを理解し、実際にコードが送るリクエストを表している数字を見分けることです。
プロキシのpingが測るもの
「プロキシのping」は、たいてい次の二つのどちらかを指します。プロバイダーのゲートウェイへのICMP pingか、ゲートウェイへの接続を開くまでの時間です。どちらも、利用者とプロバイダーの入口サーバーとの間の距離を測るものです。レジデンシャルプロキシを遅くしている区間には、どちらも触れていません。
レジデンシャルのリクエストは、クライアントからゲートウェイへ、ゲートウェイから家庭やモバイル回線につながった一般消費者のデバイスへ、そのデバイスから対象サイトへと進み、同じ経路を戻ってきます。ゲートウェイは通常、利用者の近くにある接続環境の良いデータセンターにあります。一方、出口は誰かの自宅のブロードバンドやWi-Fiにつながったデバイスで、別の大陸にあることもあります。ゲートウェイへのpingが低いのは望ましいことですが、待ち時間全体に占める割合は最も小さい部分です。
したがって、pingは「プロバイダーとの接続は正常か」を調べる診断には適していますが、「どのプロバイダーが最速か」という問いへの答えとしては不十分です。
速度の謳い文句を見抜く五つの質問
プロバイダー、レビュー、ベンチマークのいずれかで速度の数字を目にしたら、次の点を確認してください。
- どの時点まで測定したか。 接続完了まで、最初のバイトまで、最後のバイトまでのいずれかです。コードが待つのは最後のバイトです。
- どのパーセンタイルか。 平均値や中央値は、遅い側の裾を隠してしまいます。p99のほうが重要になることが多い理由は、レイテンシのグラフの読み方ガイドで説明しています。
- どの程度の負荷のもとでか。 空いているアカウントでの10件のリクエストは、1,000件の同時リクエストとはまったく異なります。
- どこからどこへか。 測定元、出口の国、対象サイトのすべてが結果を左右します。ある国の数字から、別の国のことはほとんど分かりません。
- 失敗はどう扱われたか。 ブロックやタイムアウトを平均前に除外していれば、その数字はうまくいったリクエストだけを表しています。
これらに答えられない謳い文句は、マーケティング上の数字です。偽りだということではありませんが、比較のしようがないということです。
速いブロックも失敗です
速く見せるいちばん簡単な方法は、素早く失敗することです。403で拒否したり、CAPTCHAを返したりする対象サイトは、ページ全体を描画するサイトより処理が少ないため、拒否のほうが早く返ってくることがよくあります。フラグが付いたアドレスだらけのプールが目を引く応答時間を出せるのは、まさにこのためです。
そのため、速度は成功率と並べて初めて意味を持ちます。Atlasでは、対象サイトごとに成功率80%と負荷時の速度20%でスコアを付け、それぞれをトップと比較します。拒否されるのが速いだけでは、ネットワークの順位は上がりません。ご自身のテストでも同じ原則が当てはまります。成功率の列を横に置かずに、タイミングの列だけを読むことは避けてください。遅いリクエストや失敗したリクエストが請求額に与える影響については、成功リクエストあたりのコストをご覧ください。
Atlasの速度スコアの付け方
Atlasはスコアに使う速度の数値を一つだけ公開し、その他の数値は横に並べて表示しています。
何を計測するか。 プロキシ経由で、プレーンなHTTPの対象サイトに対し、リクエスト開始から最後のバイトまでの時間を計測します。HTTPSの対象サイトではCONNECTとTLSハンドシェイクが加わり、往復回数がおよそ2倍になるため、成功とブロックは報告しますがレイテンシは報告しません。混ぜてしまうと、たまたまどの対象サイトでテストされたかによって、ネットワークが有利になってしまいます。
負荷時の計測。 各収集リージョンは、最速の国を基準として選びます。すべての時間枠で、その国に軽い負荷のリクエストを送り、1分後にcensusのフル並行数でリクエストの波を送ります。両者の比率がそのリージョンの減速係数となり、そのリージョンから試験したすべての国の低負荷時レイテンシに適用されます。低負荷時のレイテンシも並べて表示しているため、混雑時に各ネットワークがどれだけ遅くなるかが分かります。
比率によるスコア化。 速度のサブスコアは、ネットワークの負荷時p50を、Atlas内で最速のネットワークと比べたものです。100 × leader ÷ yours で算出します。トップは100点で、トップの2倍のレイテンシであれば50点です。速度はデフォルトのAtlas Scoreの14%を占めます。各手順は詳細なスコアリングルールで確認できます。
お使いのワークロードで、デフォルトの重み付けが想定するよりも速度が重要な場合は、リーダーボードのLatency firstプリセットを使うと、速度をより重視する順位に重み付けし直せます。
速度は対象サイトと国によって変わります
「最速のレジデンシャルプロキシ」というものは一つだけ存在するわけではありません。あるリージョンから、ある国へ、ある種類の対象サイトに、ある時間帯に最速となるネットワークがあるだけです。
国。 家庭用ブロードバンドが速く、対象サイトまでの経路が短い国の出口ほど、応答が早くなります。都市のような狭い範囲の場所を指定すると、選べる出口の数が減り、ゲートウェイは、使えるものがそれしかないという理由で、遅い出口を割り当てることがあります。
対象サイト。 どのネットワークでも、大きなアセットを含む重いページは、小さなJSONのエンドポイントより時間がかかります。防御の強い対象サイトでは、最終的に成功するリクエストでも、チャレンジのための往復が増えることがあります。同じネットワークでも対象サイトによって結果がどれだけ変わるかは、対象サイト別の結果で確認できます。
時間帯。 レジデンシャルの出口は、デバイスの持ち主と帯域を共有しています。出口の国での夜のピーク時には、朝食時には問題なく処理されていたリクエストが遅くなることがあります。1時間分だけの数字は、あくまでその時点のスナップショットです。
速度が重要な場合と、そうでない場合
速度のために追加で支払う前に、ご自身の作業が本当に速度に制約されているかを確認してください。
大量収集。 待っている人がいない状態で大量のページのリストを取得する場合、スループットは、リクエスト単体のレイテンシよりも並行数によって決まります。中央値がわずかに低いネットワークに乗り換えるより、並列で実行するリクエストを増やすほうが、たいてい早く終わります。失敗はすべて再試行になるため、ここでは成功率のほうが重要です。
対話型またはリアルタイムの作業。 意思決定の瞬間に行う価格チェックや広告検証など、人が待っている作業は、裾の遅さに制約されます。この場合、中央値と同じくらいp90とp99が重要です。
複数ステップのセッション。 ログイン、カート、ページ送りのあるフローは順番に実行されるため、遅いステップがあるたびに合計時間が増えます。ここでは、速度そのものよりも安定性が重要です。
プロバイダーのせいにされがちなレイテンシの多くは、実際にはご自身のクライアント側にあります。接続の再利用をしていない、地域フィルターが厳しすぎる、タイムアウトが長すぎる、といったことです。乗り換える前に試す価値のある対処法は、レジデンシャルプロキシ利用時のレイテンシを減らす方法にまとめています。
速度の謳い文句をご自身で確認する
- 実際に使っている対象サイトを2、3選びます。その中に、TLSの往復なしでネットワークの時間を測れるように、プレーンなHTTPのページを少なくとも一つ含めてください。
- 同じリクエストを、同じ1時間のうちに、同じマシンから、本番環境で使う並行数で、各ネットワークを通して送ります。
- 各リクエストを最後のバイトまで計測し、本物のページかどうかを確認するご自身のチェックを通過したかどうかも記録します。
- 成功したリクエストのp50、p90、p99を、成功率と並べて報告します。
- 出口の国で混雑する時間帯に繰り返します。順位が入れ替われば、どのネットワークが負荷に耐えるかが分かります。
そのうえで、ご自身の数字をAtlasと比較してください。Atlasは同じ方針で継続的に計測を行っており、Shifterも他のすべてのネットワークと同じルールでテストしています。