人力検索はてな
モバイル版を表示しています。PC版はこちら
i-mobile

(PHP)phpからlinuxのコマンドを実行したときにかかる負荷について

現在WEB画面のダウンロードボタンを押すと
指定した条件に合致したサーバ内のログを
CSVファイルとして出力する処理をPHPで行っています

サーバ内のログを抽出する際には
下記のようなコマンドをPHPのexec関数を使い実行しています

cat /hoge/logs/*|grep ' Failed '|grep '2008-10-08'|awk '{print $6}'|uniq

上記コマンドはサーバ内から直接実行するとなんなく処理を終えるのですが
PHPから実行すると非常に時間がかかり、サーバに高い負荷がかかってしまいます
(バックグランドで実行すれば負荷はあまりかかりませんが、処理に時間がかかってしまうので考えていません)

これはPHPからコマンドを実行する際の宿命なのでしょうか
もし、負荷を軽減し、処理スピードを上げる方法などありましたら
お教えいただきたいです

よろしくお願いします


●質問者: jayz
●カテゴリ:インターネット ウェブ制作
✍キーワード:AWK CSV grep hoge Linux
○ 状態 :終了
└ 回答数 : 1/1件

▽最新の回答へ

1 ● pahoo
●60ポイント ベストアンサー

実際に負荷測定をしたわけではないので、以下は推測です――。


PHPは基本的にシングルスレッドなので、外部でパイプ処理させている点で負荷がかかっているのかもしれません。

& でバックグラウンド処理を指定するのが無難だと思うのですが、それを回避したいということでしたら、パイプ処理にしないで、以下のように1つ1つのプロセスに分解して exec してみてはどうでしょう。実際には、一時ファイルの作成場所と削除処理を加える必要があります。

cat /hoge/logs/* >hoge1

grep ' Failed ' hoge1 >hoge2

grep '2008-10-08' hoge3

awk '{print $6}' hoge3 >hoge4

uniq hoge4

◎質問者からの返答

回答ありがとうございます

今試しにパイプを取り除いた形で実験してみました

結果は・・・とても早くなりました!

パイプ処理は便利な分負荷が高まるということでしょうか

大変参考になりました

ありがとうございます

関連質問


●質問をもっと探す●



0.人力検索はてなトップ
8.このページを友達に紹介
9.このページの先頭へ
対応機種一覧
お問い合わせ
ヘルプ/お知らせ
ログイン
無料ユーザー登録
はてなトップ