Naverのクローラーがウザいのです。
今日あたりから突然多数来襲するようになった、韓国の検索エンジンNaver.comのロボットさん。
うちのアクセスログを解析してみると、ユーザーエージェント名は
襲来頻度は、１時間に10回以上。しかもご丁寧に、全て別IP。ウザすぎる。
中国産のBaiduは律儀に30分おきにしかやってこないというのに。
こんな無礼な奴にアクセスして頂く必要は無いのだ。
ということでアク禁リストに追加。うちの.htaccessはこんな感じになったのだ。
うちのアクセスログを解析してみると、ユーザーエージェント名は
Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)になっている。
襲来頻度は、１時間に10回以上。しかもご丁寧に、全て別IP。ウザすぎる。
中国産のBaiduは律儀に30分おきにしかやってこないというのに。
こんな無礼な奴にアクセスして頂く必要は無いのだ。
ということでアク禁リストに追加。うちの.htaccessはこんな感じになったのだ。
SetEnvIf User-Agent "^TrackBack/1.6" spam
SetEnvIf User-Agent "^TrackBack/1.02" spam
SetEnvIf User-Agent "^$" spam
SetEnvIf User-Agent "^Baiduspider" spam
SetEnvIf User-Agent "^Yeti/0.01i" spam
order allow,deny
allow from all
deny from env=spam
コメント