ロボットのUserAgent(UA)を弾く(14)

ロボットのUserAgent(UA)を弾く(14)

Software(Tips)ロボットのUserAgent(UA)を弾く(14)

IP アドレスやユーザーエージェント(UA)でアクセスを弾くようにしてから連続的なアクセスは減ったように思います。今日は久しぶりに 1 分間隔くらいのアクセスがあったのでチェックしてみました。ユーザーエージェント(UA)は下記の通りです。

ichiro/3.0 (http://help.goo.ne.jp/door/crawler.html)

これは、NTT レゾナント株式会社が運用している Web クローラみたいですね。goo のヘルプページに説明がありました。悪意のあるものでもないし、実際にチェックしたところ、アクセスの間隔も 1 分ほどなので優良ロボットです。

[gooヘルプ]Webクローラについて

一部抜粋しておきます。

Web クローラとは、インターネット上の Web サーバから
Web ページを網羅的に収集し、検索エンジンのデータベースに
反映させるためのシステムです。「ichiro」は、
NTT レゾナント株式会社が運用している Web クローラの名称です。

*ichiro が収集した Web ページは下記サイトでの
検索サービスに使用させて頂きます。
(1) http://bsearch.goo.ne.jp/
(2) http://mobile.mmm.nttr.co.jp/
(3) http://mobile.goo.ne.jp/

最終更新日:

関連記事

人気記事

新着情報