マルチコアで gzip する

大きなファイルを gzip していたところ、コアを1つしか使ってくれなくて不満だったので、 gzip 互換でマルチコア対応している pigz というコマンドをインストールしてみました。

pigz - Parallel gzip

pigz, which stands for parallel implementation of gzip, is a fully functional replacement for gzip that exploits multiple processors and multiple cores to the hilt when compressing data.

† インストールしてみる

さっそくインストールします。基本的には make して、ファイルコピーするだけですが一応手順を書いておきます。
最後の paco はソースからインストールしたファイルを管理する仕組み^*1なので、 paco を使っていない場合は普通に /usr/local/bin にバイナリをコピーするだけで大丈夫です。

† 使い方は gzip と同じ

基本的な使い方はgzip と同じで、 p オプションでスレッド数が指定できるようになっています。
よくある tar と組み合わせて使うパターンだとこんな感じでしょうか。

正確なベンチとっていないので良くわかりませんが、1コアのときよりは早くなっていると思います。

• ^*1: paco でソースからインストールしたソフトウェアをパッケージ管理する