Naverのクローラーがウザいのです。

今日あたりから突然多数来襲するようになった、韓国の検索エンジンNaver.comのロボットさん。

うちのアクセスログを解析してみると、ユーザーエージェント名は

Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)
になっている。

襲来頻度は、1時間に10回以上。しかもご丁寧に、全て別IP。ウザすぎる。

中国産のBaiduは律儀に30分おきにしかやってこないというのに。

こんな無礼な奴にアクセスして頂く必要は無いのだ。
ということでアク禁リストに追加。うちの.htaccessはこんな感じになったのだ。

SetEnvIf User-Agent "^TrackBack/1.6" spam
SetEnvIf User-Agent "^TrackBack/1.02" spam
SetEnvIf User-Agent "^$" spam
SetEnvIf User-Agent "^Baiduspider" spam
SetEnvIf User-Agent "^Yeti/0.01i" spam
order allow,deny
allow from all
deny from env=spam


カテゴリ: