迷惑ロボットとして名をはせたNaverが日本再上陸?
1, 2秒あたり数十アクセスを浴びせてWebサーバーのリソースを食いつぶしてみたり、
そもそもrobots.txtをまるで無視してみたり
は知っていたが、
嫌われていると見るやGooglebotを詐称してみたり、
は任侠道上許し難き行為ですな。
ざっと手元のaccess.logをみたら、最近はこんな user agentでくるみたい。
Mozilla/5.0 (compatible; NaverBot/1.0; nhnbot@naver.com) NaverBot-1.0 (NHN Corp. / +82-31-784-1989 / nhnbot@naver.com) Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; Naver Desktop Search)さくっとこんな感じで。
BrowserMatch "Gaisbot/" fuckingbot
BrowserMatch "dloader" fuckingbot
BrowserMatch "Naver" fuckingbot
BrowserMatch "sohu agent" fuckingbot
<Location />
deny from env=fuckingbot
</Location>