人力検索はてな
モバイル版を表示しています。PC版はこちら
i-mobile

IEやFirefoxなどで保存したページをMySQL上のデータベースに取り込みたいのですが、データベースの構造をどのようにするのが扱いやすいか、また、どのような仕組みで取り込むと簡単かという事を考えたのですが、いいアイデアが思い浮かびません。何かヒントになるようなMySQLのデータ構造の作り方情報、データ取り込み手法、ツール等が掲載されているホームページなどありましたら教えてください。

●質問者: zaurus04
●カテゴリ:コンピュータ 科学・統計資料
✍キーワード:firefox IE MySQL すいか アイデア
○ 状態 :終了
└ 回答数 : 2/2件

▽最新の回答へ

1 ● hamster009
●35ポイント

http://www.mysql.gr.jp/


2 ● fonya3
●35ポイント

質問の趣旨はHTMLのtableのデータをDBに登録するということ

でしょうが、作るとしたらperlとかphpのCGI版とかで、、、

1) 指定したURLのHTMLをゲット

2) HTMLを解析してデータを取り出し

3) DBにインサートする

というプログラムをかかなければなりません。

例えば、

http://www.2ones.com/~fumio/html/index1.html

(かなりデータがデカイので注意!)

このURLのHTMLはYahooファイナンスのHTMLデータを

perlでゲットしてHTMLを解析、DBに投入、そしてその

DBからデータを取り出してHTMLを生成しています。

この一連の処理のために2000行以上のプログラムを

書いています。各種モジュールや関数、正規表現を駆使して

作らないといけないので、失礼ですが、ここでこのような質問

をするような方の手にはおえないと思います。

そこで、ExcelのWebクエリー機能を使うのはいかがでしょうか?

6万行ぐらいまでのデータはExcelにも格納可能ですし(実用的には

1万行以内程度かも)フィルターやピボットテーブルを使えば下手な

DBよりデータのハンドリングは便利です。

http://www.sophia-it.com/content/Web%E3%82%AF%E3%82%A8%E3%83...

http://www.2ones.com/bidders+/index.php?tag=%E5%85%A8%E3%81%...

関連質問


●質問をもっと探す●



0.人力検索はてなトップ
8.このページを友達に紹介
9.このページの先頭へ
対応機種一覧
お問い合わせ
ヘルプ/お知らせ
ログイン
無料ユーザー登録
はてなトップ