レジデンシャルプロキシのプロバイダーは、どこも数千万から数億規模のプールと99.9%の成功率、市場最安値を謳っている。この3つの主張は、この業界のほぼすべてのホームページに掲載されており、私たちも例外ではない。しかし、どれも選択の助けにはならない。
本ガイドは、実際に確認できる項目に基づいてプロキシネットワークの選択肢を比較するためのものだ。実際にプロバイダー間の差を生む4つの基準、決定的に見えて実はそうではない2つの基準、そして私たちが追跡している22のネットワークそれぞれの位置づけを取り上げる。理由付けよりも根拠となる数値が欲しい場合は、以下の各プロバイダーからそれぞれの比較ページにリンクしている。
まず、謳われているプール数は無視する
見出しに掲げられる「1億5000万以上のレジデンシャルIP」といった数字は、プロバイダーが公開する中で最も役に立たない数値だ。外部から検証する手段はなく、プロバイダーごとに数え方も異なる。1年間に観測したすべてのアドレスを数える場合もあれば、現在オンラインのアドレスを数える場合、あるいは再販しているパートナーのピアネットワークを数える場合もある。
検証できるのは、固定条件のテストで実際に応答する固有アドレスの数だ。同一日にアメリカの14のゲートウェイへ25万件のリクエストを送信したところ、固有の出口IP数は14,223から150,512の間に収まった。これらの数値はどのプロバイダーのプール全体を表すものではないが、同一条件下で計測されているため、その比率には意味がある。
この基準を実践的に言い換えると、プロバイダーにトライアルを依頼し、数千件のリクエストを送信して固有の出口数を数えることだ。トライアルを提供しないネットワークは、それ自体が一つの答えを示している。
実際にプロバイダー間の差を生む4つの基準
1. アドレス数ではなくネットワークの広がり
アンチボットシステムが単一のIPをブロックすることは稀だ。むしろ、そのIPが属するネットワーク、つまりASNを評価する。1,600の事業者に分散した10万件のアドレスと、350の事業者に集中した10万件のアドレスとでは、挙動が大きく異なる。後者はフィンガープリントの対象がはるかに少なくなるからだ。
この点でプロバイダー間の差は最も大きく、アドレス数とは連動しない。5カ国でのテストでは、WebshareはShifterより185少ない固有ネットワークから、9.7%多いアドレスを返した。DataImpulseとIPRoyalはいずれも6桁台前半のプールを返したが、IPRoyalは1,350のネットワーク、DataImpulseは1,526のネットワークから抽出していた。
2. 実際に支払う価格
どのプロバイダーにも2つの価格がある。料金ページに掲載された価格と、実際に自分が対象となる価格だ。この差こそが、この市場で最もよくある不意打ちだ。
| Provider | Advertised best rate | What it requires |
|---|---|---|
| Shifter | $0.75/GB | 200 GB、公開情報 |
| SOAX | $0.85/GB | 月間約$3,000 |
| Oxylabs | $2.50/GB | 月間約$2,500 |
| Evomi | $2.20/GB | 5 TB |
| Bright Data | $4.20/GB | ボリュームコミットメントとプラットフォーム料金 |
比較する際は、最低ラインではなく、実際に購入するであろう量で行うべきだ。実働のスクレイピングチームにとって現実的な数字である月間100GBの場合、この市場のほとんどは1GBあたり$2.25から$5.50の間に収まる。
3. ゲートウェイが自分の同時接続数に耐えられるか
10の同時リクエストでは問題なく動作するネットワークが、500では破綻することがある。これはどのプロバイダーも宣伝しない障害モードであり、本番のジョブを最も破綻させやすい要因だ。
テストした14のゲートウェイのうち3つは、1,000の同時接続での標準実行を完了できなかった。Proxy Cheapはアメリカでの実行のうち10.3%しか完了しなかった。NodeMavenは67.7%を完了し、応答時間の中央値は2,744msだった。ProxyEmpireは62.6%を完了した。これらは不良なIPの問題ではなく、負荷を受け付けないゲートウェイの問題だ。
契約する前にこれをテストすべきだ。トライアル中に、ノートパソコンからの10件のリクエストではなく、実際の同時接続数で実際のターゲットに向けて送信すること。
4. プロバイダーの存続期間
この基準は曖昧に感じられるかもしれないが、実際はそうではない。プロキシネットワークは閉鎖したり、買収されたり、差し押さえられたりすることがあり、そうなればクレジット残高も統合作業もすべて失われる。私たちが追跡している22のプロバイダーのうち、いくつかは既にブランドを変更しており、2社はドメインが解決しなくなっている。
10年間同一の名前で事業を続けているプロバイダーは、その資金構造について何かを示している。Shifterは2012年から、Oxylabsは2015年から、Bright Dataは2つの名前を経て2014年から事業を行っている。
決定的に見えて実はそうではない2つの基準
成功率。 ある一定の下限を超えると、この指標はもはや誰も区別しなくなる。今回のテストでは、14のネットワークのうち10が92%から100%の間に収まった。この指標が意味を持つのは、プロバイダーが完全に脱落した場合だけであり、今回は3社がそれに該当した。
国の数。 「195カ国以上」という表記は、ほとんどの料金ページに登場する。重要なのは、必要とする国に、ジョブを維持できるだけのアドレスが十分にあるかどうかだ。195カ国を謳うプロバイダーでも、実際に必要な国には利用可能なIPが400件しかないこともある。トライアル中に国別の数を尋ねるか、自分で計測すること。
各プロバイダーの位置づけ
これらは私たちが追跡しているネットワークを、実際に適した状況ごとに分類したものだ。それぞれ詳細な比較ページにリンクしている。
エンタープライズ向けプラットフォーム。 Bright Data、Oxylabs、Nimbleway。豊富なプール、充実したツール群、そして調達プロセスを前提とした価格設定。マネージド型のアンブロッキングと契約が必要な場合には適しているが、単にアドレスが必要なだけなら割高だ。
ミッドマーケット向け汎用型。 Decodo、SOAX、Webshare、Massive、Infatica、Proxy-Seller。ほとんどの購入者がここに落ち着き、類似の実測パフォーマンスに対して価格差が最も大きい層でもある。
低価格・従量課金型。 DataImpulse、IPRoyal、ProxyEmpire、PacketStream、Byteful。参入価格が安い。スケールする前にゲートウェイの安定性を確認すること。
専門型・小規模ネットワーク。 NodeMaven、Evomi、Rayobyte、Live Proxies、Proxy Cheap、NetNut、IPIDEA、LunaProxy。
プール、価格、カバレッジを並べた完全なリストは、プロキシ代替ページに掲載している。
午後の時間だけでできる絞り込み手順
-
自分の実際の利用量における公開価格が予算内に収まる、3つのプロバイダーを選ぶ。最低レートは無視する。
-
それぞれからトライアルを取得する。同一のマシンから、実際のターゲットへ、実際の同時接続数で2,000件のリクエストを送信する。
-
固有の出口IP数、固有のASN数、完了率を数える。応答時間の中央値を記録する。
-
必要な国ごとに一度ずつ繰り返す。国別のプールは、国の数が示すよりもはるかに大きく変動する。
-
自分の利用量における支払額に対する、利用可能なアドレス数の比率で選ぶ。
これは、私たちが14のネットワークで用いた手順そのものであり、すべての数値をベンチマークシリーズにまとめている。そしてこれは、誰かのマーケティングページではなく、あなた自身のワークロードを反映する唯一の比較方法だ。
Shifterの位置づけ
私たちは、5GBのエントリープランでの1GBあたり$2.00から、200GB以降の$0.75まで、全ての価格帯を公開しており、どの段階でも営業電話は不要だ。計測した5カ国では、私たちのネットワークは2,441の固有事業者から抽出しており、これはシリーズ中で最も広い分散であり、応答時間の中央値は平均400msだった。
生のプール数ではWebshareとDecodoに次ぐ第3位であり、この点および競合が私たちを上回った国についてはShifterレビューに記載している。価格を問わずプールの深さだけが基準であれば、そのページで他にどこを見るべきかが分かる。
そうでなければ、トライアルを開始し、上記の5つの手順を実行してほしい。