ご利用企業 50,000+ 世界中のクライアント
レイテンシも価格も半分
各プロバイダーの公表されている最低の1GBあたりレート。Webshareは3TBプランで月額$4,200のとき$1.40に達します。
| 月間ボリューム | Shifter | Webshare | 節約額 |
|---|---|---|---|
| エントリープラン | $10 $2.00/GBで5GB | $3.50 1GBあたり$3.50/GB | 43% |
| 10 GB | $20 $2.00/GB | $27.50 $2.75/GB | 27% |
| 50 GB | $50 $1.00/GB | $122.50 $2.45/GB | 59% |
| 100GB | $100 $1.00/GB | $225 $2.25/GB | 56% |
| 最良レート | $0.75/GB 200 GBから | $1.40/GB 月額$4,200で3TB | 46% |
テスト中にオンラインだったライブIP
テスト時点で各ネットワークが稼働中で到達可能だった固有IPの数であり、ネットワーク全体の規模ではありません。レジデンシャルIPは終日ローテーションするため、両プロバイダーとも24時間で提供するアドレス数はさらに多くなります。
国別の全指標
国を選択すると、不利な数値も含めた測定結果の全体をご覧いただけます。
| 指標 | Shifter | Webshare |
|---|---|---|
| 送信リクエスト数 | 250,000 | 250,000 |
| テスト中のライブIP | 136,667 | 150,512 |
| 固有ネットワーク数（ASN） | 1,606 | 1,518 |
| 固有都市数 | 5,813 | 5,954 |
| 平均レイテンシ | 364 ms | 975 ms |
| 成功率 | 99.8% | 99.9% |
Shifterはアメリカで1,606のネットワークに達し、Webshareの1,518を上回り、応答時間は364msでWebshareの975msに対し、約3倍速くなりました。Webshareが保持する稼働中IPはわずか9.2%多いだけで、価格は1GBあたり$1.40に対しShifterは$0.75でした。
測定方法について
各リクエストについて、プロバイダーのローテーティングレジデンシャルゲートウェイを介して新しい接続を開き、IPエコーサービスから出口アドレスを読み取りました。新しい接続は新しい出口を強制するため、異なるアドレスの数はプールのどれだけが到達可能であったかに直接対応します。
WebshareとShifterは、同一のリクエスト数、1,000の同時実行数、10秒のタイムアウト、同一のターゲットでテストされ、1台のサーバー上で一度に1つのプロバイダーのみをテストすることで、両者が帯域を奪い合うことがないようにしました。
各国は、両プロバイダーに均等に適用された固定のボリュームで実行され、最小市場の60,000リクエストから米国の250,000リクエストまで、プロバイダーあたり合計560,000リクエストとなりました。
これらの数値の意味
各数値は、テスト期間中に生きていて到達可能だったIPを数えたものであり、いずれかのネットワークの総規模ではない。レジデンシャルIPは実際のデバイスが接続と切断を繰り返すことで絶えずローテーションするため、丸一日を通して見れば両プロバイダとも数百万のIPを提供する。稼働中のクローラーにとって重要なのは、同時刻にどれだけのIPが応答するかであり、これが本測定の対象である。サンプルサイズは国ごとに異なるため、棒グラフは国内での両プロバイダの比較であり、国同士の比較ではない。
なぜShifterレジデンシャルプロキシを使うのか？
どこでもおよそ2倍速い
カナダでは324msに対して937ms、アメリカ合衆国では364msに対して975ms。Shifterは5か国すべてで応答が速く、通常は2倍以上の差だった。
はるかに広いネットワーク分布
フランスの148ネットワークに対して96、ドイツの276に対して188。Webshareのより多いアドレス数は、明らかに少ない自律システム(ASN)の上に成り立っており、これはアンチボットシステムが着目する点である。
イギリスでリード
イギリスの生きているIPは53,506で、51,564に対して優位であり、Shifterが生数でもリードした唯一の国だった。
大規模利用時は1GBあたり46%低コスト
$0.75に対して$1.40、100GBの月では$100に対して$225であり、Webshareの最良レートに必要な3TBの契約義務もない。
よくある質問
Webshareのベンチマーク方法に関するよくある質問。
HTTPクライアントを両方のゲートウェイ経由でIPエコーエンドポイントに向け、リクエストごとに新しい接続を開くことで毎回ローテーションさせ、異なるアドレスの数を数える。両プロバイダーで同一のリクエスト数、同じマシン、同じ時間帯を用いる。
これはテスト時点で稼働していたIPの数であり、合計ではないからです。公表されている数値は、そのネットワークがこれまでに確認したすべてのアドレスを数えています。レジデンシャルIPは一日中ローテーションするため、両プロバイダーとも24時間で数百万のIPを提供します。私たちは、ある瞬間に1つの国で到達可能だったIPの数を測定しました。これがクロールを制限する数値です。
表に示されている理由は2つあります。Shifterは米国、フランス、ドイツにおいて、はるかに多くのネットワークからアドレスを取得しており、すべての国でおよそ2倍の速さで応答しました。より少ないネットワークに集中した大きなプールは、アンチボットシステムによるフィンガープリンティングが容易になります。
それは積み重なります。ここでのカナダの中央値では、100万リクエストにかかる待機時間はShifterで約90時間、Webshareで260時間です。長時間のクロールでは、この差はページ上の数値ではなくスループットとして表れます。
測定する 自社のワークロードで
プール規模とレイテンシは、対象ごとに異なる振る舞いを示します。自社がスクレイピングするサイトに対し、必要な国で同じテストを実行し、自分自身の数値で判断してください。