PHPでfile_get_contentsを実行する際、ページ遷移をjavascriptで行っている場合の対処方法
現在、以下の方法で、サイトのデータをピックアップしています。
１）PHPのfile_get_contentsを使って、所定のURLからHTMLデータをダウンロードし、
２）所定の解析を行って欲しい情報を抽出
＜問題点＞
URLにpage=1などの引数がある場合は問題無いのですが、
ページネーションをjavascriptで実行している場合などは、URLが変わらないので、
file_get_contentsに次のページのURLが渡せません。
こうした場合の対処方法をご教授頂ければと思います。
PHPもjavascriptも余り高技術レベルではありませんので、なるべく具体的にお教え頂けると助かります。
よろしくお願いします。
ログインして回答する
ベストアンサー
-
匿名回答1号
1. javascriptの動作をphpで行う。
設計次第ですが、javascriptで生成するURLはさほど難しいものではない事が多いと思うので、それを解析してエミュレートするのは難しくないと思います。
ソースも参考になりますが、その参照に際しても、アクセスしているURLを知るにも、ブラウザにあるデベロッパーツールとか開発者ツールなどという機能が非常に役に立ちます。
http://www.buildinsider.net/web/chromedevtools/01#page-4
2. headless browserを使う
上記が出来ない、そこまでしたくない場合は、実際の画面を持たず、スクリプトなどから使えるheadless browserを使ってアクセスすればjavascriptも実行されます。
ただ、ブラウザですからちょっと重たいかも知れません。
http://jonnnnyw.github.io/php-phantomjs/ -
その他の回答
この質問へのコメント
質問の情報
- 登録日時
- 2015-11-18 12:16:01
- 終了日時
- 2015-11-23 11:26:20
- 回答条件
- 1人5回まで
この質問のカテゴリ
この質問に含まれるキーワード
人気の質問
-
親族（実家）の犬が無駄吠えをしています。朝方に一時間くらい吠えているらしい。昼にも一時間くらい吠え続…
匿名質問者
2
1
-
東京都は山に四方を囲まれています。風水的にはどうですか？。匿名質問者1
-
誰か読んでくれませんか？ ゲームの話です アンダーテールっていうんですけど 話し相手が全然いないんです…
yun_1024
-
スマホ（アンドロイド）に、TypeAppを入れております。登録になっているメアドのいくつかを削除したいので…匿名質問者
2
-
アスペルガー精神3級会社員男性(34歳独身)です。 元々眠りが浅いのに最近尚更深刻な夢や深く考え過ぎる夢を…
hayakushinene