JA
今すぐ始める

用語集

プロキシの種類

レジデンシャルプロキシ

インターネットサービスプロバイダーが家庭の回線に割り当てたIPアドレスを経由して通信を送るプロキシです。リクエストは一般の人が閲覧しているように見えます。

レジデンシャルプロキシは、一般消費者向けのインターネットプロバイダーが家庭用の回線に割り当てたIPアドレスを通じてトラフィックを送ります。そのアドレスを調べると、所有者としてホスティング企業の代わりにComcast、Vodafone、Deutsche Telekomなどが返ってきます。この製品全体は、まさにこの一点の事実の上に成り立っています。

信頼は、サイトがそれに対してできることとできないことから生まれます。データセンタープロキシはホスティングの範囲にあり、そうした範囲はまとめて疑わしいものとして扱えます。普通の顧客がラックから閲覧することはないからです。一般消費者向けISPの範囲はそうした形で切り捨てられません。そこに実際の顧客がいるからです。レジデンシャルのアドレスに向き合うサイトには、手軽に使えるカテゴリー単位のシグナルがないため、リクエストを振る舞いで判断するしかありません。そして振る舞いは、お客様がコントロールできるものです。

だからこそ、地域や自動化に敏感なあらゆる用途ではレジデンシャルが標準になります。現地の人が見る価格を読む、特定の国で表示される検索結果を確認する、明らかな機械を拒否するサイトから収集する、といった用途です。レジデンシャルは速くも(実際は遅いです)安くもありません。それでも選ばれるのは、リクエストが調べられる前の段階で負けない唯一のタイプだからです。

制約は、自分のものではないものを借りているという点です。家庭用の回線は、ルーターの電源を切り、プロバイダーを変え、休暇に出かける人々のものなので、個々のアドレスは本質的に一時的です。これには、理解しておく価値のある2つの結果があります。プールはトラフィック単位で課金されます。特定の家庭のIPを月単位で貸すことは、誰にも誠実には販売できないからです。そして、見出しのプール規模は、これまでに確認されたすべてを表すもので、今到達できる数とは異なります。

そのため、規模は購入者が最も誤解させられやすいポイントです。数千万という数字は過去の累計です。作業が成功するかどうかを決めるのは、実行する瞬間に、必要な国でいくつの異なるアドレスが稼働しているかで、この2つの数字が近いことはまれです。前者はどのプロバイダーでも示せます。尋ねる価値があるのは後者です。

アドレスが一時的なため、通常はローテーティングプロキシとして使います。ひとつのゲートウェイで、リクエストごとに異なる出口を使う形です。タスクでひとつのアドレスを維持する必要がある場合は、スティッキーセッションで保持するか、ISPプロキシに切り替えます。ISPプロキシは、借り物の家庭の回線をレジデンシャルの登録を持つデータセンターのマシンに置き換えたもので、誰かがルーターを抜いても消えません。

最後の要素はターゲティングです。プールは特定の場所を指定できて初めて役に立つため、レジデンシャルは通常、国単位で、多くの場合は都市やISP単位でも、別々のエンドポイントを使わずに認証情報で指定します。

HProxyでの扱い

当社は、レジデンシャルのエンドポイントを継続的に再検証しています。供給元が主張する件数は使いません。理由はまさに上のとおりで、プールの数字と今稼働している数字は別の数値であり、作業に影響するのはその一方だけだからです。ターゲティングは単一のゲートウェイのユーザー名で表現するため、フランクフルトからのドイツのトラフィックの指定は、user-country-de-city-frankfurtのような認証情報になります。

よくある質問

レジデンシャルプロキシがIP単位の代わりにGB単位で課金されるのはなぜですか?

特定の家庭のアドレスを月単位で誠実に貸せる人は誰もいないからです。回線は借り物で一時的です。相手側の人はプロバイダーを変えたり、ルーターを再起動したり、休暇に出かけたりでき、アドレスはそれとともに消えます。プロバイダーが実際に提供を約束できる単位はトラフィックだけです。だからこそIP単位の料金は、ラックのマシンが本当にお客様のために確保されるISPやデータセンターのプロキシのものなのです。

プールの規模はどのくらいで、その数字は重要ですか?

その数字が示唆するほどには重要ではありません。数千万という見出しは、これまでに観測されたすべてのアドレスの過去の累計で、その大半は今は到達できません。作業が成功するかどうかを決めるのは、実行する瞬間に、実際に必要な国でいくつの異なるアドレスが稼働しているかです。宣伝用の数字の代わりにその数字を尋ね、2つを区別できないプロバイダーは別の質問に答えているものとして扱ってください。

レジデンシャルプロキシはデータセンタープロキシより速いですか?

いいえ、そうはなりえません。データセンタープロキシはバックボーンの経路上にあるマシンで動き、レジデンシャルのアドレスは誰かの家庭用ブロードバンドで、それに伴うレイテンシと変動があります。レジデンシャルは信頼のために購入するもので、その代償を速度と価格で払います。対象がネットワークの種類で選別しないなら、レジデンシャルは遅い結果を得るための高価な方法になります。

レジデンシャルプロキシの利用は合法ですか?

プロキシの利用はごく普通のネットワーク技術で、問題はむしろ、それを通じて何をするか、そしてアドレスがどこから来たかです。精査する価値があるのは供給網です。トラフィックを運ぶ回線の持ち主が、それを承知の上で同意しているかどうかです。アドレスを使って何をするかは、対象の規約と現地の法律で決まり、それは用語集より弁護士に尋ねるべき問題です。

ローテーティングとスティッキー、どちらを選ぶべきですか?

好みより、タスクに合わせて選んでください。状態を持たない大量の読み取り専用の収集にはローテーティングプロキシが適しています。リクエストを多くのアドレスに分散させることで、個々のアドレスがレート制限に引っかからないからです。ログインや複数ステップの流れを保持するものにはスティッキーセッションが適しています。流れの途中で新しいIPに変わると、盗まれたセッションのように見えるからです。タスクでひとつのアドレスが数週間にわたって必要なら、ISPプロキシを選んでください。

サイトはレジデンシャルプロキシの使用を見抜けますか?

アドレスの種類だけでは見抜けません。それこそがレジデンシャルの意義です。それでも、他のあらゆる点で見抜かれることはあります。IPが示す国と矛盾するブラウザのフィンガープリント、スクリプトのライブラリに特有のTLSハンドシェイク、人間ではありえないリクエストの間隔、あるいはひとつの家庭のアドレスが突然オフィス規模の量を運ぶことなどです。レジデンシャルは、疑われる最も安易な理由を取り除きますが、それ以外の理由はすべてそのまま残ります。

用語集全体に戻る。

HProxy.

実際のレジデンシャルプロキシ。 Ours are 従量課金.

レジデンシャルはGBあたり$0.23から、従量課金制で、残高に有効期限はありません。

HProxy