gnu paralellで質問があります｡ﾈｽﾄされたﾙｰﾌﾟ処理はどのように扱うのでしょうか？ bashで下記のような処理をparalellで並列処理したいと考えてます｡ for dir in `c…

gnu paralellで質問があります｡
ﾈｽﾄされたﾙｰﾌﾟ処理はどのように扱うのでしょうか？

bashで下記のような処理をparalellで並列処理したいと考えてます｡
for dir in `cat /tmp/rsync-list`;do
for src in `cat /tmp/rsync-$dir`;do
echo $src;
find $src -depth | cpio -o > /archive/$src.cpio;
done
done

またrsyncやsshを利用して複数のｻｰﾊﾞｰに分散処理する場合はどのようにすればいいでしょうか？
/fileserver/fileA～Zまでのﾌｧｲﾙをserver1 server2 server3の3台を使って､1台あたり4個分を並列処理でgzip圧縮する場合など

よろしくお願いします｡

bashで下記のような処理をparalellで並列処理したいと考えてます｡
for dir in `cat /tmp/rsync-list`;do
  for src in `cat /tmp/rsync-$dir`;do
    echo $src;
    find $src -depth | cpio -o > /archive/$src.cpio;
  done
done

二重のﾙｰﾌﾟと言っても､処理しているのは $src だけなので以下のようなｼｪﾙｽｸﾘﾌﾟﾄに書き換えられます｡

for dir in `cat /tmp/rsync-list`;do
 cat /tmp/rsync-$dir | \
 parallel "find {} -depth | cpio -o > /archive/{}.cpio"
done

/fileserver/fileA?Zまでのﾌｧｲﾙをserver1 server2 server3の3台を使って､1台あたり4個分を並列処理でgzip圧縮する場合

状況がよく分かりませんがこのようなｺﾏﾝﾄﾞになるはずです｡

ls /fileserver/file[A-Z] | \
 parallel --sshlogin server1,server2,server3 \
 --transfer --return {.}.gz --cleanup "gzip {}"

数は制御できません｡
早く終わったｻｰﾊﾞから次のｼﾞｮﾌﾞが実行されるので､たまたま小さいﾌｧｲﾙだけを割り当てられた代わりにたくさんの処理をしたｻｰﾊﾞができるというような動作をします｡

ｵﾌﾟｼｮﾝの意味は man parallel を見れば分かると思います｡
http://www.gnu.org/software/parallel/man.html

まったくparallelを使ったことが無いのであれば､↓で雰囲気がつかめると思います｡
http://siguniang.wordpress.com/2012/09/09/notes-on-gnu-parallel-the-command-line-power-tool/