人力検索はてな
モバイル版を表示しています。PC版はこちら
i-mobile

プログラムからブログ記事を収集(クロール)、を実装したいのですが、手軽な方法はあるでしょうか?
(特定のブログサービスのRSSを指定して取得、はなしでお願いします)

●質問者: rapuntuleru
●カテゴリ:コンピュータ インターネット
✍キーワード:RSS クロール サービス プログラム
○ 状態 :終了
└ 回答数 : 3/3件

▽最新の回答へ

1 ● niwa-mikiho
●27ポイント

PHP なり Perl でページを取得して、正規表現で抜き出し、それらデータをログに書き出す。


それらを行うスクリプトを、Linux なら cron、Windows ならタスクに登録すればいいかと思います。


2 ● tak
●26ポイント

RSS以外で効率的にURLを収集する方法があるかどうかわかりませんが、

まず、blogのURLを収集

それらのURLをプログラムでダウンロード → 保存

するだけです。



それ以上は質問内容の詳細がわからないと答えようがありません


3 ● e55ind
●27ポイント

YahooAPIで、ブログの検索を行い、

このときURLが取得できるので、

再度そのURLを読み込んで記事を取り込んだりします。

関連質問


●質問をもっと探す●



0.人力検索はてなトップ
8.このページを友達に紹介
9.このページの先頭へ
対応機種一覧
お問い合わせ
ヘルプ/お知らせ
ログイン
無料ユーザー登録
はてなトップ