ロボットのUserAgent(UA)を弾く(4)

ロボットのUserAgent(UA)を弾く(4)

bot(ボット)ロボットのUserAgent(UA)を弾く(4)

またもやロボット発見。いい加減、robots.txt を整理する時がきたのか。今回は日本のサイトのようなのでサーチはされた方がいいのかな。ユーザーエージェント(UA)は下記の通りです。

Mozilla/5.0 (compatible; BecomeJPBot/2.3; MSIE 6.0 compatible; +http://www.become.co.jp/site_owners.html)

これは、ビカムショッピングサーチというショッピングモールや、商品を検索できるサービスのサイトのようです。サイトではロボットの IP アドレスの帯域を公開していますので、Apache などで簡単に弾くこともできそうです。

[引用]
BecomeJPBotには64.124.85.0~64.124.85.255というIPアドレスが割り当てられています。
上記IPアドレス以外からのアクセスかどうかをご確認ください。
[追記(2007-12-11)]
ただ、このロボットの日本版ではないものもあるので、
UA の場合は、BecomeJPBot と BecomeBot などを弾く必要があります。

最終更新日:

関連記事

人気記事

新着情報