Yahoo!が新クローラー「Yahoo! Slurp」を利用開始
Yahoo!は先週、より速く、効率的にウェブサイトを巡回する新しいクローラー「Yahoo! Slurp」を利用開始した。
このクローラーを利用することで今までの帯域負荷の25％を節約することが可能になる。
Yahoo!のブログによると切り替えまでの数週間は2つのクローラーが巡回しており、
一部のウェブサイトではYahoo!検索の巡回頻度が多くなっていることがあったという。
このクローラーの変更により、インデックスされているページの入れ替わりやランキングに変動が
あるという。
Weather Report – The New Yahoo! Search Crawler (Slurp) Is Here!
http://www.ysearchblog.com/archives/000334.html