xargs でコマンドを並列実行（複数起動）させる

ディレクトリにあるファイルを一括で処理したいときに find と xargs の組み合わせでスクリプトを書くのは定番になっていますが、圧縮など一つ一つの処理がかなり重い場合、処理をシリアルに実行していくとものすごく時間がかかります。最近のCPUは複数コアを搭載している場合が多いですが、複数のコアを使って動くプログラムは少ないので、処理を複数のプロセスで並列実行すれば（CPUの空き時間を使い切れるので）早く終わらせることができます。

これまでは xargs を手動で2つ実行するとかアホなことをやっていたのですが、xargs 自体に複数プロセスを立ち上げさせる機能が備わっていたのを見つけたのでメモ。

xargsコマンドを使って指定したコマンドを並列実行させる - 技術メモ帳

あまり知られていないが、GNUのxargsコマンドには、プロセスの最大数を設定できるオプションというのが用意されている。
コレを使って、プロセスを並列実行させてみよう。

xargs --max-procs=MAX-PROCS -P MAX-PROCS command

ちょっとテストしてみましたが、確かに複数プロセスで処理できていますね。