人力検索はてな
モバイル版を表示しています。PC版はこちら
i-mobile

ロボットの巡回周期を調べる方法を教えてください。

●質問者: sima
●カテゴリ:ウェブ制作
✍キーワード:ロボット
○ 状態 :終了
└ 回答数 : 2/2件

▽最新の回答へ

1 ● haru
●0ポイント

相当古い情報です。「Web Archive」から引用しました。

http://web.archive.org/web/20010508012357/http://www.mars.sphere...

検索エンジンのしくみ教えます(索引更新周期編第1章)

◎質問者からの返答

自分で実験するのは大変そうですが、非常にわかりやすい内容でした。ありがとうございます。


2 ● xiaozi
●50ポイント

kojiさんがもしサイトをお持ちなら、ログをとられていますよね?

検索エンジンのロボットは、そのIPや名前などで自分を名乗っていますので

ログをみて各サーチエンジンのスパイダーを特定しカウントしてはいかがでしょうか?

生のログでカウントするのが大変でしたら、ログ計測のツールでIPで絞り込んでカウントすることもできますよね。

ロボット名やIPのまとまった情報は、

http://www.spiderhunter.com/spiderlist/

IP Address Tracking, IP Address database and Search Engine Spider information at Spider Hunter

http://www.dais.is.tohoku.ac.jp/logs/agentgripes.html

で確認できます。

ご不明な点があれば、遠慮なく質問してください。

◎質問者からの返答

はい、早速計ってみようと思います。どうも、ありがとうございました。

関連質問


●質問をもっと探す●



0.人力検索はてなトップ
8.このページを友達に紹介
9.このページの先頭へ
対応機種一覧
お問い合わせ
ヘルプ/お知らせ
ログイン
無料ユーザー登録
はてなトップ