Comment obtenir une compression maximale avec .tar.gz? [dupliquer]

La façon dont je comprends l'utilisation de tar + gzip est qu'il tarest normalement utilisé pour consolider un groupe de fichiers dans un seul fichier, puis gzipest utilisé pour compresser ce fichier.

J'ai récemment appris que l' taron peut aussi compresser.

Comme je ne comprends pas tout à fait le fonctionnement de la compression, c’est peut-être ridicule que l’envoi d’un fichier .tar pré-compressé à gzip empêche celle-ci de se compresser aussi bien que son potentiel le permet.

Ma question est essentiellement la suivante: quelle combinaison d'arguments / méthodes de compression dois-je utiliser pour créer le plus petit fichier tar.gz absolu, et à quoi ressemble l'instruction en ligne de commande?

Vous pouvez également indiquer à tar la compression maximale de l'utilisateur de la manière suivante:

export GZIP=-9
tar cvzf file.tar.gz /path/to/directory

De plus, pour que vos envvars ne soient pas encombrés, vous pouvez procéder comme suit:

env GZIP=-9 tar cvzf file.tar.gz /path/to/directory

Comme vous l'avez dit - " tar peut aussi compresser ", cela signifie que - tarne compresse pas toujours les données toutes seules.

Il ne le fait que lorsqu'il est utilisé avec l' zoption. Cela aussi, pas par lui-même, mais en transmettant les données tarées à travers gzip.

Toutefois, comme indiqué dans cette réponse, vous pouvez diriger les deux commandes: tar& de gziptelle sorte que vous puissiez spécifier explicitement le niveau de compression de la gzipcommande afin d’atteindre une taille de sortie minimale.

tar cvf - / chemin / vers / répertoire | gzip -9 -> fichier.tar.gz

Ici 9spécifie le niveau de compression maximum possible.

En général, ni gzip ni tar ne peuvent créer "le plus petit fichier tar.gz". Il existe de nombreux utilitaires de compression pouvant compresser au format gz. J'ai écrit un script bash « gz99 » pour essayer gzip, 7zet advdefpour obtenir le fichier le plus petit. Pour utiliser ceci afin de créer la plus petite exécution de fichier possible:

tar c path/to/data | gz99 file.gz

L' advdefutilitaire de AdvanceCOMP donne généralement le plus petit fichier, mais est également bogué (l' gz99utilitaire vérifie qu'il n'a pas corrompu le fichier avant d'accepter la sortie de advdef). Pour l'utiliser advdefdirectement, créez file.tar.gz comme bon vous semble. Puis lancez:

advdef -z -4 file.tar.gz

Cela créera un fichier gz standard qui peut être lu par gzip et tar normalement, mais un peu plus petit. C’est à peu près tout ce que vous pouvez faire avec le format gz.

Comme vous n’avez appris que récemment que tar peut compresser, sans indiquer pourquoi vous vouliez le plus petit fichier ".tar.gz", vous ignorez peut-être qu’il existe des formats plus efficaces pouvant être utilisés avec des fichiers tar, tels que xz. En règle générale, le passage à un format différent peut entraîner une bien meilleure amélioration de la compression que de jouer à tour de rôle avec les options gzip. Le principal inconvénient de xz est qu’il n’est pas aussi courant que gzip, il est donc possible que les personnes à qui vous envoyez le fichier doivent installer un nouveau paquet. Il a également tendance à être un peu plus lent, en particulier lors de la compression. Si cela ne vous concerne pas et que vous voulez vraiment le plus petit fichier tar, essayez:

 tar cv path/to/data | xz -9 > file.tar.xz

Les versions modernes de tar, par exemple sous Ubuntu 13.10, détectent automatiquement les fichiers compressés. Donc, même si vous utilisez la compression xz, vous pouvez toujours décompresser comme d'habitude:

 tar xvf file.tar.xz

Pour donner une idée rapide de la comparaison de ces utilitaires de compression, considérons l'effet de la compression du patch 3.1.1 à partir du noyau Linux:

utility         cpu    format  size(bytes)
gzip -9         0.02s  gz      105,628
advdef -2       0.07s  gz      102,619
7z -mx=9 -tgzip 0.42s  gz      102,297
advdef -3       0.55s  gz      102,290
advdef -4       0.75s  gz      101,956
xz -9           0.03s  xz       91,064
xz -3e          0.15s  xz       90,996

Dans cet exemple trivial, nous voyons que pour obtenir le plus petit gz, il faut advdef (bien que 7z -tgzip soit presque aussi bon et beaucoup moins bogué). Nous voyons également que le passage à xz nous fait gagner beaucoup plus d’espace que d’essayer de tirer le meilleur parti de l’ancien format gz, sans que la compression prenne trop de temps.

tar c /path/to/data | gzip --best > file.tar.gz

gzipL'option --best(équivalente à -9) demande le niveau de compression le plus élevé.