Архивирование и сжатие в линукс?

Question

[Thiago Alvarez]

Зачем вообще нужно архивировать файлы?
Раньше думал, что архивировать с tar нужно для того, чтобы собрать все файлы в один файл, а уже удобно потом их сжимать.
Но ведь можно сразу одной командой сжать сразу множество файлов, без архивации.
Просветите плз

Comments

[Lynn «Кофеман»]

Ты о чём вообще?
Если про zip, так он появился позже tar

И вообще, tar это Tape ARchive, т.е. архивирование (не сжатие) на ленты (кассеты).

[Thiago Alvarez]

Алексей Тен, а зачем сначала архивируют, а потом сжимают?

[Lynn «Кофеман»]

Думаю, что по привычке.

[pfemidi]

Thiago Alvarez, потому что так запаковывается лучше. [Win]RAR и 7-Zip тоже умеют создавать solid archives.

[pfg21]

работа с одним фалом гораздо проще и быстрее.
к примеру в пакете исходников ядра содержится 68 000 файлов - передача их по отдельности будет весьма геморойна.
потому их упаковывают в один архив, эффективно его сжимают и предоставляют конечному пользователю.

если б файлы сначала сживали а потом архивировали - пакет ядра имхо был бы в несколько раз больше.

Answer 1

[Saboteur]

tar изначально был сделан для упаковывания файлов и каталогов в ленточный архив (одним потоком).

gzip это потоковый архиватор, он не знает про файлы, он пакует поток. На ходу. Быстро. Он не анализирует файл целиком, поэтому алгоритм, который используется в gzip, сейчас используется практически везде (в модемах, в сетевых карточках и так далее).

исторически сложилось так, что для упаковки с компрессией нескольких файлов, использовали связку tar+gzip, что стало стандартом де-факто.
В современном мире, стандарт бывает важнее нескольких процентов сжатия, поэтому .tgz - вполне популярное и надежное решение, которое будет работать на любом линукс. А вот zip есть далеко не везде. Вы видимо не сталкивались с урезанными версиями линуксов в embedded, да и даже в RHEL7 в стандартную поставку он не входит, надо ставить отдельно.

Ну и напоследок - tar умеет хранить posix права доступа, а zip или rar - нет. Поэтому .tgz формат еще надолго останется с нами.

Answer 2

[pfg21]

сжатие без архивации менее эффективно, хотя удобнее в доступе.
для холодного бекапа или пакетирования данных удобнее держать все в одном комплекте.

жаль что в tar и cpio нет индекса файлов.
надо поковырять рар5, туда кажись *никс атрибуты файла завезли.

Answer 3

[Рональд Макдональд]

В чём проблема одной командой заархивировать в tar, а потом в gzip или bzip2?
tar -cvjf arc.tar.bz2 /path
например.

Comments

[Thiago Alvarez]

не проблема, но не пойму для чего все сначала архивируют, а потом сжимают?

[Рональд Макдональд]

Thiago Alvarez, исторический хвост из 80-90-х.
tar изначально нужен был для записи на ленты, а для этого файлы надо склеить.
А сжатие - оно вообще из другой сферы.

[rPman]

@Zoominger
Потому что архиваторы gzip/bzip/xz - поточные и умеют работать только с ОДНИМ файлом (потоком). Потому что эти архивы чуть ли не стандарт в linux и многие утилиты по умолчанию даже пытаются их распаковывать при чтении.

Почему это хорошо - потому что поточные команды эффективно используют многозадачность для выполнения задач, без лишних затрат памяти на промежуточное хранение данных.

Почему нужно пользоваться потоками и пайпами, потому что источником данных может быть не только файл на диске, но к примеру результат работы другой программы, а та использовать еще и еще. И все эти приложения во время работы будут последовательно передавать друг другу результат работы, приостанавливая работу приложения, которое делает это быстрее остальных.

К сожалению все больше и больше приложений перестают корректно поддерживать потоки, вынуждая пользователю сохранять промежуточные данные во временном каталоге. Это не страшно, если у тебя считанные мегабайты-гигабайты, а если вам нужно работать с терабайтовым дампом?

[Рональд Макдональд]

rPman, да, конвейер - реально одна из вещей, которые восхищают в Linux.
Спасибо за развёрнутый ответ.