Как указать уровень сжатия при использовании tar -zcvf?

143

Я очень часто гзип каталоги на работе. Что я обычно делаю

tar -zcvf file.tar.gz /path/to/directory

Есть ли способ указать уровень сжатия здесь? Я хочу использовать максимально возможное сжатие, даже если для его сжатия требуется больше времени.

linux compression tar gzip Lazer
источник

Ответы:

143 
GZIP=-9 tar cvzf file.tar.gz /path/to/directory

при условии, что вы используете Bash. Как правило, установите для переменной среды GZIP значение «-9» и обычно запускайте tar.

Кроме того - если вы действительно хотите лучшее сжатие, не используйте gzip. Используйте lzma или 7z.

А при использовании gzip (что в любом случае является хорошей идеей по разным причинам) рассмотрите возможность использования pigzпрограммы, а не программы gzip.


источник
14
pigz - это "параллельный gzip", который использует все ваши ядра для сжатия gzip. Вы можете смотреть topи видеть его, используя где-то между 200% -400 $ процессора.
Фелипе Альварес
2
К сведению, для формата .bz2 используйте: BZIP2 = -9 tar cvjf file.tar.bz2 / path / to / directory
Tomofumi
3
Кажется, переменная окружения теперь GZIP_OPTтакая же, как и при использовании.
Провидец
3
На странице руководства в Ubuntu 16.04 для gzip: «В Vax / VMS имя переменной среды - GZIP_OPT, чтобы избежать конфликта с набором символов для вызова программы». Для sh, csh и MSDOS это должен быть только GZIP
Ponyboy47
68

Вместо использования флага gzip для tar, gzip файлы вручную после процесса tar, затем вы можете указать уровень сжатия для программы gzip:

tar -cvf files.tar /path/to/file0 /path/to/file1 ; gzip -9 files.tar

Или вы можете использовать:

tar cvf - /path/to/file0 /path/to/file1 | gzip -9 - > files.tar.gz

-9 в командной строке gzip указывает gzip использовать максимально возможный уровень сжатия (по умолчанию -6).

Редактировать: Исправлена ​​ошибка командной строки на основе комментария @depesz.

Матрица Крот
источник
4
Использование труб должно быть сделано с:tar cvf - /path/to/directory | gzip -9 - > file.tar.gz
1
Первый пример должен заканчиваться file.tar, так как gzipдобавляет расширение .gz.
Бонсайвинг
4
почему бы тебе не пропустить f -? если файла нет, то это stdin / out
akostadinov
дополнение к предыдущему комментарию. Из раздела "man tar" Среда: TAPE Устройство или файл, который будет использоваться для архива, если --file не указан. Если эта переменная среды не установлена, используйте вместо нее stdin или stdout.
Микл
2
и мы можем уменьшить "gzip -9 -" -> "gzip -9". Из раздела «man gzip» Описание: Если файлы не указаны или имя файла «-», стандартный ввод сжимается до стандартного вывода.
Микл
53

Современные версии tar поддерживают формат архива xz (GNU tar, начиная с версии 1.22 в 2009 году, Busybox начиная с версии 1.17.0 в 2010 году).

Он основан на lzma2 , вроде 7-Zip версии gz . Это дает лучшее сжатие, если вы согласны с требованием поддержки xz.

tar -Jcvf file.tar.xz /path/to/directory

Я только что обнаружил здесь (в основном, обман этого вопроса, но в стек-обмене Unix), что есть также переменная окружения XZ_OPT = -9 для управления уровнем сжатия XZ, аналогичным GZIP в другом посте.

XZ_OPT=-9 tar -Jcvf file.tar.xz /path/to/directory
Дэвид С. Бишоп
источник
2
+1 xz намного лучше, чем bzip2 и gzip. Вот сравнение: tukaani.org/lzma/benchmarks.html
User1
8
Компромисс - скорость. XZ значительно медленнее.
Звонок
32 
tar cv /path/to/directory | gzip --best > file.tar.gz

Это второе решение Matrix Mole, но немного сокращенное:

При вызове tar опция fуказывает, что вывод является файлом. Установка его в -(stdout) заставляет tar записывать свой вывод в stdout, который является поведением по умолчанию без обоих fи -.

И как указано в gzipсправочной странице, если файлы не указаны, gzip будет сжиматься из стандартного ввода. Там нет необходимости -в gzipвызове.

Опция --best(эквивалентная -9) устанавливает самый высокий уровень сжатия.

Карлито
источник
1
Это прекрасно работает. Также, если вы запускаете с правами root, права и владельцы также сохраняются. В противном случае вы должны указать. Также, если это не было очевидно, «-9» - лучшее сжатие, а «-1» - самое быстрое сжатие. «-1» все еще занимает много времени, если у вас много файлов ;-)
PJ Brunet
Это работает с xzи pixzтоже. Это отличный способ контролировать количество потоков, используемых для параллельного сжатия, без необходимости создавать промежуточный файл .tar. tar -cv /path/to/dir | pixz -p4 > output.tpxz
Вот
10

Существует также возможность указать программу сжатия, используя -I. Это может включать в себя параметр уровня сжатия.

tar -I 'gzip -9' -cvf file.tar.gz /path/to/directory
Крис Гибсон
источник
2
Более старые версии tar, такие как предоставляемые в CentOS 6 и 7, не поддерживают предоставление аргументов в аргументе -Iarg, они будут пытаться рассматривать все это как имя программы для exec и, таким образом, потерпят неудачу. По крайней мере, начиная с tar 1.29 в Debian Stretch, это работает.
Гепард
2

И, конечно же, tar-файл macOS bsd должен быть другим:

tar -czf file.tar.gz --options gzip:compression-level=9 /path/to/directory
rfay
источник