検索エンジンの公開API、もしくはWebページへのMechanizeを利用し、ある検索クエリーに対しての結果を収集したいと考えています。しかし、Yahoo!JapanやYahoo!US、Googleなどのメジャーな検索エンジンは、検索結果の表示を1000件までに限定していて、それ以上の結果を得ることができません。
どこかで、1万件程度の検索結果を得ることはできないものでしょうか。
なにとぞ、ご教授お願いします。
他社のサービスを商売に使いたいなら、相手と交渉すべきやろう。でないと泥棒や。
商売になるかどうか未定なのですが、まず興味を満たしたいんです。泥棒といいますが、それを行ってしまえば、Yahoo!だってGoogleだって、泥棒です。
buidoって1000件以上の結果を閲覧できるんですか?
でもできたとしても、インデックス数が少ないという問題はありますね・・・