グーグルのクラウドを支えるテクノロジー > 第66回 サーチエンジンのロードバランシング・アルゴリズム(パート3)
- 編集部の見解や意向と異なる内容の場合があります
- 編集部は内容について正確性を保証できません
- 画像が表示されない場合、編集部では対応できません
- 内容の追加・修正も編集部では対応できません
CTC教育サービスはコラム「グーグルのクラウドを支えるテクノロジー > 第66回 サーチエンジンのロードバランシング・アルゴリズム(パート3)」を公開しました。
###
はじめに
前回に引き続き、2019年に公開された論文「Cache-aware load balancing of data center applications」を元にして、サーチエンジンのロードバランシングに関するアルゴリズムを紹介します。今回は、検索処理システムのシミュレーターを用いた評価結果を見ていきます。
シミュレーターによるキャッシュミスの測定
これまで説明してきたように、このアルゴリズム(TARS)の目的は、検索処理サーバーが、ある単語についてのPL(検索結果の候補となるWebサイトのID番号の集合)取得する際に、そのデータがメモリー上のキャッシュに保存されている確率を高めて、データベースへのアクセス量を減らすことです。つまり、キャッシュミスの割合をできるだけ低くすることがゴールとなります。
ここで、前回の図1で説明した仕組みを思い出してみましょう。そこでは、サーバーごとに担当する単語を設定しておき、自身が担当する単語についてはキャッシュミスは発生せず、逆に、担当しない単語については、一定の確率でキャッシュミスが発生するという素朴な仮定を置いていました。その上で、過去の検索文に含まれる単語の組み合わせを用いて、キャッシュミスを最小化するようにサーバーごとに割り当てる単語のグループ分けを行いました。
この続きは以下をご覧ください
https://www.school.ctc-g.co.jp/columns/nakai2/nakai266.html
ソーシャルもやってます!