ロードバランサーは、届いたトラフィックをバックエンドのサーバーのプールに分散させ、どの1台にも負荷が集中しないようにし、どれか1台が故障してもサービスが生き残るようにします。リバースプロキシの系統の中の特定の仕事です。サイト自身のインフラの前に立ち、リクエストを受け、それぞれを正常で最も空いているバックエンドに渡します。背後で個々のサーバーが再起動されてもサイトが動き続けるなら、たいていロードバランサーのおかげです。
外側から出会うもので、だからこそ知っておく価値があります。大規模なサイトに接続するとき、お客様はほぼ必ず、オリジンのマシンの代わりにそのロードバランサーと話しており、ロードバランサーは一般に、リバースプロキシと同じエッジの機能を担っています。TLSの終端、ヘルスチェック、そしてしばしば、リクエストを先に進めるかどうかを決めるレート制限やボットのルールです。拒否はここで、どのアプリケーションサーバーも関わる前に起こることがあります。
それはまた、スクレイパーを混乱させる振る舞いも説明します。同じリクエストの間の見かけ上の不一致です。連続するリクエストが、状態やキャッシュの内容がわずかに異なる別々のバックエンドにルーティングされることがあるため、同じURLがわずかな時間をおいてわずかに異なるレスポンスを返すことがあり、常に1台のマシンと話していると想定するセッションは驚かされることがあります。これは単にプールが透けて見えているだけです。
この用語はリバースプロキシやCDNと大きく重なっており、誠実な区別は重点の置き方です。リバースプロキシは一般的な分類で、負荷分散はそれが担う機能のひとつで、キャッシュやフィルタリングと並びます。CDNはそのパターンを地理的な規模で運用したものです。専用のロードバランサーは振り分けだけを行うことがあり、ほとんどのリバースプロキシとすべてのCDNは、より大きな仕事の一部として負荷を分散します。スクレイパーにとっての実用上の結論は同じです。応答しているのはサイトの前にあるインフラで、お客様の運命を決めるのは、サイトより、それであることが多いのです。
よくある質問
ロードバランサーはリバースプロキシと同じものですか?
負荷分散はリバースプロキシが行う仕事のひとつなので、すべてのロードバランサーはリバースプロキシに似ていますが、すべてのリバースプロキシがロードバランサーだけというわけではありません。リバースプロキシはキャッシュ、TLSの終端、トラフィックのフィルタリングも行い、専用のロードバランサーはリクエストをバックエンドに振り分けるだけのこともあります。重なりが大きいため、同じソフトウェアが両方の役割を果たすことがよくあります。
ロードバランサーの背後にあるサイトの結果が一貫しないのはなぜですか?
連続するリクエストが、キャッシュや状態がわずかに異なる別々のバックエンドのサーバーに着くことがあるため、同じリクエストがわずかに異なるレスポンスを返すのです。それはサーバーのプールが透けて見えているだけです。常に1台のマシンと話していると想定するコードは、これをバグやブロックと誤解することがあります。
ロードバランサーがスクレイパーをブロックすることはありますか?
それがブロックしていることはよくあります。オリジンの前に立つロードバランサーは一般に、レート制限やボットのルールを含め、リバースプロキシと同じエッジの機能を担っているため、どのアプリケーションサーバーもリクエストを見る前に、そこで拒否が起こることがあります。ロードバランサーで拒否されたリクエストについて、サイト自身のログに何も残っていないことがあるのもそのためです。
用語集全体に戻る。

