* robots.txt BecomeBot締め出し
User-agent: BecomeBot Disallow: /
RandomNoteの検索履歴をしっちゃかめっちゃかにしていきやがったBecomeBotをルートから締め出し。
どーせ日本語読めないんだから、その方が互いに資源の節約だ。
RandomNoteはロボットに検索させないようにしているようなんだけど、BecomeBotはmetaを解さないらしい。
参考:
ウェブマスターフォーラム - クローラの情報
http://forum.su-jine.net/theme/seo/58/
◇追記
2006/02/04,11:58:17,64.124.85.211,"64.124.85.211.become.com","-","-",GET,"/robots.txt","","1.1",200,117,"-","","Mozilla/5.0 (compatible; BecomeBot/2.3; MSIE 6.0 compatible; +http://www.become.com/site_owners.html)"
robots.txtを読んで去っていった。その辺は行儀がいいな。
#Web
create : 2006/02/04 (Sat)
update : 2006/02/04 (Sat)