ネット大好き

Spider Detectorというサビス。こちらのサイトwww.spidermatic.comでは無料で検索エンジンのロボットが自分のサイトを訪問したことをメールで知らせてくれるサービスを提供しています。

・検索エンジンのスパイダーがあなたのサイトを訪れた際に、その訪問を知らせるEメールを受け取ることのできるサービスです。

・各検索エンジンのスパイダーのクロールするタイミングとパターンを知ることが出来ます。

・毎日ログファイルの中からスパイダーのアクセスログを探す必要がなくなります。

・数ある検索エンジンのどの検索スパイダーがサイトを訪れたかを知ることが出来ます。

・複数のウェブページがある場合それぞれのページごとに通知を受け取ることが可能です。

・HTMLソースコードの記述を変更する必要はありません。
・JavaScriptは必要ありません。
・PHPが動作するウェブサーバーであれば、９９％対応します。

さつそく登録してみました。

対象ロボットは以下です。一応ぜんぶチェック

*********************************************

Alexa Research - www.alexa.com - ia_archiver
AltaVista - www.altavista.com - Scooter/3.3
AltaVista - www.altavista.com - Scooter/3.3.vscooter
Ask Jeeves - www.askjeeves.com - Mozilla/2.0 (compatible; Ask Jeeves)
Ask Jeeves/Teoma - www.teoma.com - Mozilla/2.0 (compatible; Ask Jeeves/Teoma)
FAST - www.alltheweb.com - FAST-WebCrawler/3.8
FAST - www.alltheweb.com - FAST-WebCrawler/3.x Multimedia
FAST/Overture - www.alltheweb.com - FAST-WebCrawler/3.8
gigablast.com - www.gigablast.com - Gigabot/1.0
Google - www.google.com - Googlebot/2.1
Google - www.google.com - Googlebot-Image/1.0
Google - www.google.com - Mediapartners-Google/2.1
Google - www.google.com - compatible; Googlebot/2.1
Google - www.google.com - Googlebot/2.1
Infoseek - www.infoseek.com - SideWinder/2.0B
Inktomi a Yahoo Company - www.inktomi.com - Slurp/si
Looksmart - www.looksmart.com - ZyBorg/1.0 Dead Link Checker
Looksmart - www.looksmart.com - ZyBorg/1.0
LookSmart, Ltd - www.looksmart.com - grub-client-
Microsoft Coroporation - www.msn.com - msnbot/0.3
Microsoft Coroporation - www.msn.com - msnbot/1.0
Microsoft Corporation - www.msn.com - msnbot/0.11
Microsoft Corporation - www.msn.com - MSRBOT/0.1
NameProtect Inc. - www.nameprotect.com - NPBot
NHN Corp - www.naver.com - Cowbot-0.1.1
NHN Corp - www.naver.com - NaverBot-1.0
Openfind Taiwan - www.openfind.com.tw - Openbot/3.0+
walhello.com - www.walhello.com - appie 1.1
www.entireweb.com - www.entireweb.com - Speedy Spider
www.girafa.com - www.girafa.com - Girafabot
Yahoo Inc - www.yahoo.com - YahooFeedSeeker/1.0
Yahoo! - www.yahoo.com - Yahoo! Slurp
Yahoo/Overture - www.yahoo.com - Yahoo-MMCrawler/3.x

すると　21:50 22:19 22:36 　こんなめーるが
********************************************
Spidermatic Alert!

Domain: www.menamomi.net
Spider: Yahoo! Slurp
Date: 2005-07-27 22:36
Spider URL: http://help.yahoo.com/help/us/ysearch/slurp
Comments:
Yahoo! Slurp is currently used by Yahoo!,
and powers www.yahoo.com.
For more information visit: http://help.yahoo.com/help/us/ysearch/slurp

----------------
Powered by: Sozon
www.sozon.com
www.seospy.com
----------------
*******************************************
私の作成しているホームページmenamomi.net に
Yahoo! Slurpがさかんに来ています。８月１日も２３回来ています。どうしてこんなに来るのでしょうか。１時間ごと更新しているわけではないのですが。そのほかまMicrosoftのmsnbottが日に３回Googleは日に１回という程度
でアスセスしているようです。

こちらのブログのログを見るとinktomisearch.com が時々見受けられますこちらはヤフー傘下のアメリカのサーチロボットみたいです。