Y!J ボットが狂ったように巡回している
2011年2月20日
2月も半ばを過ぎたので、ログを見てみたら、なんとなく凄いことになっていた。なぜか知らないが、ヤフー!の巡回ボットが狂ったようにこのサイト内を巡っているよう。

今月すでに25786ヒットもある。2月18日現在。このサイトにそんなにページやファイルがある訳でもないのに、どうしてだろう。そしてそもそもグーグルが検索結果を出すようになったため、ヤフー!の巡回ボットに存在意義があるのかちょっと疑問に思うのだが。
もしこのような状況が続くのであれば robots.txt で弾いた方がよさそうかもしれない。
注:スパム防止のため、コメントは承認制となっています。このページではなく、サイト全体や管理人宛のコメントは、ゲストブックにお願いします。