Compacter un fichier ! oui, mais vite !

Avec l’aire de multi-coeur, je me suis toujours demandé pourquoi on avait pas de compacteur capable de profiter de multi-coeur (On est sur un calcul EP simple ! on doit avoir un bon speedup). Oui, en clair, on compacte un fichier presque 2 fois plus vite si on a deux processeurs…

Et bien, oui ! ça existe :

gzip parallélisé : pigz

bzip2 parallélisé : pbzip2

On a un speedup quasi linéaire et en plus on a les mêmes options, ça mériterait un :

apt-get install pigz pbzip2

alias gzip=’pigz’

alias bzip2=’pbzip2′

Print Friendly, PDF & Email
Ce contenu a été publié dans Bash !, avec comme mot(s)-clé(s) , , , . Vous pouvez le mettre en favoris avec ce permalien.