自分のサイトのアクセス解析を見ると、

「AskJeeves」というロボットが何千回も来ています。
今のところ無害ですが、不気味なのでアクセス拒否したいです。
robots.txtは効果が無かったので
.htaccessで拒否しようと思います。
どのように記述すれば良いか教えて下さい。
ちなみに、分かっているのはAskJeevesという名前ぐらいで
IP、UAなどは分かりません。

※回答の際は、そのままコピペして使える状態でお願いします。
urlなどは不要です。

コピペしたものを置いてみて効果があればポイントはずみます。
逆に効果が無ければポイントは差し上げられませんのでよろしくお願い致します。

回答の条件
  • 1人2回まで
  • 登録:2006/11/30 01:25:07
  • 終了:2006/12/03 18:46:49

回答(5件)

id:ilkjk No.1

ilkjk回答回数54ベストアンサー獲得回数62006/11/30 01:46:09

ポイント10pt

Ask Jeeves自体は普通の検索エンジンのボットです

怪しいことはないです

.htaccessで拒否する場合は以下のURLを参考にIPごとはじくのが良いかも知れません(AskJeevesのIPかどうか100%確信はないですが‥)

http://willmacc.wordpress.com/bot-ips/ask-jeeves-teoma-ip-addres...

http://72.14.203.104/search?sourceid=navclient&hl=ja&ie=...


<Files *>

order allow,deny

allow from all

deny from 140.239.126.13

deny from 140.239.251.220

deny from 140.239.251.221

deny from 140.239.251.222

deny from 140.239.251.223

~~

以下上記の要領でIPを一個一個 [deny from]

~~

</Files>

id:eizosa

いわしも拝見しました。ありがとうございます。

後ほど試してみます。

2006/11/30 02:07:55
id:maname No.2

まなめ回答回数78ベストアンサー獲得回数72006/11/30 01:56:37

http://www.htaccesseditor.com/

こちらで作成してみるのはどうでしょう?

id:eizosa

質問をお読み下さい。

2006/11/30 02:08:04
id:mitiyon No.3

mitiyon回答回数24ベストアンサー獲得回数12006/11/30 01:59:38

http://ask.jp/

サーチエンジン Ask.jpのクローラですね。


クロールのとめ方はこちらに書いてあります。

http://static.ask.jp/docs/help/help_siteregistered.html

id:eizosa

このurlの中の

1.METAタグを使った検索結果への非表示

2.robots.txt設置による登録拒否

両方とも効果が無かったので

.htaccessで拒否したいのです。

2006/11/30 02:10:44
id:tamtam3 No.4

tamtam3回答回数345ベストアンサー獲得回数202006/11/30 02:07:52

ロボット君はこれですね。イマイチ行儀がわるいです

http://japan.cnet.com/news/media/story/0,2000056023,20087192,00....


で、止める方法はこちら

1. METAタグを使った検索結果への非表示

検索結果から非表示にしたいページに下記のHTMLを記述してください。

<META name="robots" content="noindex, nofollow">

2. robots.txt設置による登録拒否

ウェブサイトのルートディレクトリ(一番上の階層)にrobots.txt ファイルを配置します。

(配置例:http://www.×××.co.jp/robots.txt)

以下の記述をした robots.txt ファイルをウェブサイトのルートディレクトリに配置してください。

すべてのサーチ エンジンからのクロールを拒否したい場合

User-Agent: *

Disallow: /

Ask.jp のエンジンからのクロールだけを拒否したい場合

User-Agent: Teoma

Disallow: /

User-Agent: Ask Jeeves

Disallow: /

http://static.ask.jp/docs/help/help_siteregistered.html

で、上記の処置を取ったにも拘らず検索結果が表示される場合は、お手数ですが、電子メールにてtech@mail.ask.jp宛てご連絡ください。

だそうです

id:eizosa

METAタグもrobots.txtも効果がありませんでしたが

メールしたくないので

.htaccessで拒否したいです。

今のところポイントを差し上げられる可能性があるのはilkjkさんだけです。

2006/11/30 02:16:48
id:backupper No.5

backupper回答回数95ベストアンサー獲得回数102006/11/30 09:15:03

ポイント300pt

#.htaccess

#-----------------------------------------

SetEnvIf User-Agent "Ask Jeeves" BANAGENT

SetEnvIf User-Agent "Teoma" BANAGENT

Order allow,deny

Allow from all

Deny from env=BANAGENT

#-----------------------------------------

これで良いと思います。

id:eizosa

おお、なんだか良さそうです。

今、試せる環境にいないので

後ほど試してみます。

---------------------------

あれからロボットが来た様子はないので

効果あったようです。

IPではじくよりこちらの方が短くてすむので、

backupper さんの方法を採用させて頂きます。

本当にありがとうございました!

2006/12/03 18:44:03
  • id:ilkjk

    コピペ可能な状態ってのを忘れてた
    (少し負荷かかりそうですしIP羅列系は拒否の仕方として個人的には好きではないですが)


    以下コピペ可能な文
    <Files *>
    order allow,deny
    allow from all
    deny from 140.239.126.13
    deny from 140.239.126.13
    deny from 140.239.251.220
    deny from 140.239.251.221
    deny from 140.239.251.222
    deny from 140.239.251.223
    deny from 140.239.251.224
    deny from 140.239.251.230
    deny from 207.204.132.233
    deny from 207.204.132.234
    deny from 208.178.104.55
    deny from 209.67.252.197
    deny from 209.67.252.199
    deny from 209.67.252.211
    deny from 209.67.252.212
    deny from 209.67.252.213
    deny from 209.67.252.214
    deny from 209.67.252.215
    deny from 209.67.252.216
    deny from 210.51.25.142
    deny from 211.13.230.249
    deny from 216.143.191.131
    deny from 216.200.130.20
    deny from 216.200.130.200
    deny from 216.200.130.201
    deny from 216.200.130.202
    deny from 216.200.130.203
    deny from 216.200.130.204
    deny from 216.200.130.205
    deny from 216.200.130.206
    deny from 216.200.130.207
    deny from 216.200.130.208
    deny from 216.200.130.209
    deny from 216.200.130.210
    deny from 216.200.130.242
    deny from 216.200.130.244
    deny from 216.200.130.245
    deny from 216.200.130.246
    deny from 216.200.130.248
    deny from 216.200.130.249
    deny from 216.200.130.26
    deny from 216.200.130.77
    deny from 216.200.130.78
    deny from 216.200.130.79
    deny from 216.200.130.85
    deny from 216.200.130.86
    deny from 216.200.130.87
    deny from 216.200.130.88
    deny from 216.200.130.89
    deny from 216.34.121.100
    deny from 216.34.121.18
    deny from 216.34.121.19
    deny from 216.34.121.31
    deny from 216.34.121.32
    deny from 216.34.121.33
    deny from 216.34.121.34
    deny from 216.34.121.67
    deny from 216.34.121.68
    deny from 63.236.92.143
    deny from 63.236.92.144
    deny from 63.236.92.145
    deny from 63.236.92.146
    deny from 63.236.92.147
    deny from 63.236.92.148
    deny from 63.236.92.149
    deny from 63.236.92.150
    deny from 63.236.92.151
    deny from 63.236.92.152
    deny from 63.236.92.153
    deny from 64.55.148.3
    deny from 64.55.148.37
    deny from 64.55.148.38
    deny from 64.55.148.39
    deny from 64.55.148.4
    deny from 64.55.148.43
    deny from 64.55.148.44
    deny from 64.55.148.45
    deny from 64.55.148.5
    deny from 64.55.148.50
    deny from 64.55.148.51
    deny from 64.55.148.52
    deny from 64.55.148.53
    deny from 64.55.148.54
    deny from 65.192.195.0
    deny from 65.192.195.1
    deny from 65.192.195.10
    deny from 65.192.195.11
    deny from 65.192.195.12
    deny from 65.192.195.13
    deny from 65.192.195.14
    deny from 65.192.195.15
    deny from 65.192.195.16
    deny from 65.192.195.17
    deny from 65.192.195.18
    deny from 65.192.195.19
    deny from 65.192.195.2
    deny from 65.192.195.20
    deny from 65.192.195.21
    deny from 65.192.195.22
    deny from 65.192.195.23
    deny from 65.192.195.24
    deny from 65.192.195.25
    deny from 65.192.195.26
    deny from 65.192.195.27
    deny from 65.192.195.28
    deny from 65.192.195.29
    deny from 65.192.195.3
    deny from 65.192.195.30
    deny from 65.192.195.31
    deny from 65.192.195.4
    deny from 65.192.195.5
    deny from 65.192.195.6
    deny from 65.192.195.7
    deny from 65.192.195.8
    deny from 65.192.195.9
    deny from 65.214.32
    deny from 65.214.36
    deny from 65.214.38
    deny from 65.214.44
    deny from 65.214.45.0
    deny from 65.214.45.1
    deny from 65.214.45.10
    deny from 65.214.45.100
    deny from 65.214.45.11
    deny from 65.214.45.12
    deny from 65.214.45.13
    deny from 65.214.45.14
    deny from 65.214.45.15
    deny from 65.214.45.16
    deny from 65.214.45.17
    deny from 65.214.45.18
    deny from 65.214.45.19
    deny from 65.214.45.2
    deny from 65.214.45.20
    deny from 65.214.45.21
    deny from 65.214.45.22
    deny from 65.214.45.23
    deny from 65.214.45.24
    deny from 65.214.45.25
    deny from 65.214.45.26
    deny from 65.214.45.27
    deny from 65.214.45.28
    deny from 65.214.45.29
    deny from 65.214.45.3
    deny from 65.214.45.30
    deny from 65.214.45.31
    deny from 65.214.45.32
    deny from 65.214.45.33
    deny from 65.214.45.34
    deny from 65.214.45.35
    deny from 65.214.45.36
    deny from 65.214.45.37
    deny from 65.214.45.38
    deny from 65.214.45.39
    deny from 65.214.45.4
    deny from 65.214.45.40
    deny from 65.214.45.41
    deny from 65.214.45.42
    deny from 65.214.45.43
    deny from 65.214.45.44
    deny from 65.214.45.45
    deny from 65.214.45.46
    deny from 65.214.45.47
    deny from 65.214.45.48
    deny from 65.214.45.49
    deny from 65.214.45.5
    deny from 65.214.45.50
    deny from 65.214.45.51
    deny from 65.214.45.6
    deny from 65.214.45.7
    deny from 65.214.45.8
    deny from 65.214.45.9
    </Files>
  • id:Kotobuki_F
    >1.METAタグを使った検索結果への非表示
    >2.robots.txt設置による登録拒否

    これって「ロボットが見に行くけど,それをサイトで公開しません」ってだけで,ロボットが来ることは拒否できないんじゃないかな。
  • id:eizosa
    >ilkjkさん

    長!ありがとうございます。



    >Kotobuki_Fさん

    考えてみればおっしゃる通りです!
    効果が無いのも当たり前ですね。ごっちゃにして考えていました。


この質問への反応(ブックマークコメント)

「あの人に答えてほしい」「この質問はあの人が答えられそう」というときに、回答リクエストを送ってみてましょう。

これ以上回答リクエストを送信することはできません。制限について

絞り込み :
はてなココの「ともだち」を表示します。
回答リクエストを送信したユーザーはいません