Google の検索結果ﾍﾟｰｼﾞの内容に含まれる動的生成ﾍﾟｰｼﾞについて､質問をいたします｡
はてなははてなｷｰﾜｰﾄﾞなど､うまいことﾈｯﾄﾜｰｸを張り巡らせる仕組みがあり､検索ｴﾝｼﾞﾝに引っかかりやすい｡ｱｸｾｽ数もあるのでｸﾛｰﾙ頻度も高い｡
とか｡
| ▽2
●
meefla ●180ﾎﾟｲﾝﾄ  ﾍﾞｽﾄｱﾝｻｰ |
Google の検索結果に動的ﾍﾟｰｼﾞが含まれるのには､1. の静的ﾍﾟｰｼﾞ経由のものもあるでしょうが､それだけでは説明がつかないようなものもあります｡
これは｢3. その他｣にあたり､｢Google の検索ｴﾝｼﾞﾝが検索結果(動的ﾍﾟｰｼﾞ)を収集するようにﾌﾟﾛｸﾞﾗﾐﾝｸﾞされている｣という事だと思われます｡
動的ﾍﾟｰｼﾞは､通常の検索ｴﾝｼﾞﾝでは収集できないという事から､Deep Web(深層Web)と呼ばれます｡
しかし､Google はこの Deep Web からも動的ﾍﾟｰｼﾞを拾ってｲﾝﾃﾞｯｸｽ化しているようです｡
2008年と少し古い文献ですが､Google の技術者が発表した "Google’s DeepWeb"
http://www.cs.washington.edu/homes/alon/files/vldb08deepweb.pdf
によれば､この時点で Google は､世界50ヶ国語以上の700以上のﾄﾞﾒｲﾝにおける､のべ数百万の検索ﾌｫｰﾑから､動的ﾍﾟｰｼﾞを収集しています｡
この手法は､"surfacing"(日本語だと｢表層化｣でしょうか)と呼ばれています｡
The results or our surfacing are currently enjoyed by millions of users per day world-wide, and cover content in over 700 domains, over 50 languages, and from several million forms.
(PDF 12ﾍﾟｰｼﾞ､CONCLUSION より)
技術的な詳細の解説は私の力量を超えていますが､例えばﾌｫｰﾑに入力するｷｰﾜｰﾄﾞのｾｯﾄは､中核になるものをいくつか(言語ごとに)決めておき､検索結果として帰ってきたﾍﾟｰｼﾞからさらにｷｰﾜｰﾄﾞを収集してｷｰﾜｰﾄﾞｾｯﾄの数を増やしていく､という事をしているようです｡
一つのﾌｫｰﾑにｷｰﾜｰﾄﾞを500個くらい設定しています｡
ｴﾗｰﾍﾟｰｼﾞが帰ってきたら､ｷｰﾜｰﾄﾞのｾｯﾄを組み替えるわけです｡
また､一つの検索ﾌｫｰﾑに複数のｷｰﾜｰﾄﾞを入力した場合､というのも考慮されています｡
得られた動的ﾍﾟｰｼﾞを Google の検索結果ﾍﾟｰｼﾞに表示して､ﾕｰｻﾞｰがそのﾘﾝｸをｸﾘｯｸしたらﾗﾝｸを上げる､というおなじみの手法も併用しているようです｡
検索ﾌｫｰﾑからの動的ﾍﾟｰｼﾞの収集は全自動化されていて､Google の検索ｴﾝｼﾞﾝ自体に組み込まれている､との事です｡
以上､お役に立てることを祈りつつ｡
