YodaoBot

最近くるのをしばしば見るbot.

Mozilla/5.0 (compatible; YodaoBot/1.0; http://www.yodao.com/help/webmaster/spider/;)

http://www.yodao.com/だろう。Yet another 中華サーチエンジンかな。

まったく同じものを同じタイミングで2回取ってることがあるぐらいで、特にDoSっぽい印象は今のところないが、中国のサーチエンジンとかクローラというものを一切信用していないし、クロールされるメリットは私にはまったくない。
転ばぬ先の杖というやつで、拒否リストに追加しておいた。残念ながら、こういうのはもはや運用の基本ノウハウですよね。

現在のUSER_AGENT拒否はこんな感じ。

BrowserMatch "Naver" denied_agent
BrowserMatch "Yeti" denied_agent
BrowserMatch "Baiduspider" denied_agent
BrowserMatch "Gaisbot/" denied_agent
BrowserMatch "dloader" denied_agent
BrowserMatch "Website Explorer" denied_agent
BrowserMatch "sohu agent" denied_agent
BrowserMatch "psbot" denied_agent
BrowserMatch "iaskspider" denied_agent
BrowserMatch "Accoona-AI-Agent" denied_agent
BrowserMatch "Shim-Crawler" denied_agent
BrowserMatch "QihooBot" denied_agent
BrowserMatch "Twiceler" denied_agent
BrowserMatch "YodaoBot" denied_agent

<Location />
deny from env=denied_agent
</Location>