人力検索はてな
モバイル版を表示しています。PC版はこちら
i-mobile

googlebotからのアクセスが数時間おきに、1時間あたり5000件近くきます。アクセスログ解析がゆがめられてしまうのですが、頻度をさげたり、拒否できないものでしょうか。以下、アクセスログです。
222.122.46.205 - - [05/Jun/2006:08:40:30 +0900] "GET / HTTP/1.1" 200 90 "http://www.####.com/" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

●質問者: loy
●カテゴリ:インターネット ウェブ制作
✍キーワード:2006 HTTP JUN Mozilla いもの
○ 状態 :終了
└ 回答数 : 4/4件

▽最新の回答へ

1 ● naochin
●11ポイント

http://tech.bayashi.net/pdmemo/robots.html

robots.txtを設置してはいかがですか。


2 ● sera_yr
●11ポイント

以下参考になると思います。

頻度を下げたいという場合はこちら

http://www.google.com/support/webmasters/bin/answer.py?answer=33...


拒否したい場合はこちら

http://tech.bayashi.net/pdmemo/robots.html


3 ● mutsuju
●100ポイント ベストアンサー

googlebotはそんな頻度でアクセスしに来ません。

%whois -h whois.nida.or.kr 222.122.46.205

query: 222.122.46.205

# ENGLISH

KRNIC is not a ISP but a National Internet Registry similar to APNIC.

The address is allocated yet

Please contact following ISP for further information

[ ISP Organization Information ]

Org Name : Korea Telecom

Service Name : KORNET

Org Address : Jungja-dong, Bundang-gu, Sungnam-ci

Org Detail Address: 206

[ ISP IP Admin Contact Information ]

Name : IP Administrator

Phone : +82-2-3674-5708

E-Mail : abuse@kornet.net

[ ISP IP Tech Contact Information ]

Name : IP Manager

Phone : +82-2-3674-5708

E-mail : abuse@kornet.net

[ ISP Network Abuse Contact Information ]

Name : Network Abuse

Phone : 080-223-5577

E-mail : abuse@kornet.net

半島のアクセスです。IPレベルでdenyするのが適切かつ幸せになれるかと。robots.txtに何か書いてもUAすら偽装する連中ですから無視するでしょうね、きっと。

参考のようなURL

http://www.italk.ne.jp/minagawa/tech/krfilter.html

ちなみにホンモノのgooglebotのlog(対象URIは****でマスク)

crawl-66-249-72-146.googlebot.com - - [05/Jun/2006:12:31:23 +0900] "GET **** HTTP/1.1" 200 10238 "-" "Mozilla/5.0 (compatible; Googlebot/2.1;

+http://www.google.com/bot.html)"

◎質問者からの返答

ありがとうございます。確かにあまりにも件数が多いなとは思っていました。


4 ● aiaina
●11ポイント

ロボットにリンクをたどれなければいいので、JavaScriptを活用して、urlを分割しておいてスクリプトでくっつけて飛ぶのはどうでしょう?

またはmetaに入力しない。

または認証をかける。

http://q.hatena.ne.jp/1149484398

関連質問


●質問をもっと探す●



0.人力検索はてなトップ
8.このページを友達に紹介
9.このページの先頭へ
対応機種一覧
お問い合わせ
ヘルプ/お知らせ
ログイン
無料ユーザー登録
はてなトップ