BASH: как удалить огромное количество директорий, содержащих директории и файлы?

Question

[vlarkanov]

Собственно, сабж.

Есть абстрактный /data/maindir , содержащий в себе множество поддиректорий, содержащих в себе ещё несколько уровней поддиректорий и на самом нижнем уровне лежат маленькие файлы.

Как максимально быстро выполнять чистку /data/maindir (саму эту директорию удалять не нужно)?

Comments

[sim3x]

Удалить требуется все директории?

Answer 1

[Алексей Черемисин]

Быстро не получится, увы...
Вариантов несколько, самый первый - переименовать этот каталог и на его месте создать новый с таким же именем и правами.
А уже неторопясь чистить переименованный каталог.
Лучше всего конечно, в эту точку подмонтировать раздел, и в случае чего форматировать.

Answer 2

[pfg21]

rm -r /data/maindir/* ??

Comments

[Андрей Шубин]

rm -rf /data/maindir/*

Чтобы вопросов не задавала, мол точно удалить? А этот файл тоже удалить? И этот?

[Алексей Черемисин]

Если файлов/каталогов в /data/maindir/ , то вылетит с ошибкой out of memory, проходили, знаем. Как то пришлось удалять сессии php из одного такого каталога в десяток миллионов файлов. Удаление заняло 4 дня... был написан специальный скрипт, который вытягивал файлы для удаления пачками.

[pfg21]

ну дык разворачивание /* не оптимизировано для поточного выполнения.
автор не уточнял такие параметры.

в таком случае надо использовать find .... -delete
сия програмка просто обходит все файлики и пристреливает, не набирая промежуточных кешей.
~200 тысяч тайликов find проредил мне за час фонового режима. потребление памяти не смотрел, но и лагов не замечал хотя и было всего 2 гига рамы :)

[hx510b]

Андрей Шубин, rm работает медленно, особенно с шаблонами * bash - если файлов миллионы - bash просто не сможет передать список в rm

[pfg21]

hx510b, дык для этого есть find

[hx510b]

pfg21, совершенно верно, find работает эффективнее, хотя придуман для другого ))

Answer 3

[hx510b]

find /pathto [ options ] -delete
удаляет то, что задано и быстрее всех
причем без ключа -delete можно проверить, что список тот который хотелось.

Comments

[nihi1ist]

Дополню, что если просто удалить все файлы, то указать так:
find /data/maindir -type f -delete

Можно дополнить по части имени:
find /data/maindir -name filename* -type f -delete

Википедия автору в помощь.

Answer 4

[Vovanys]

Если размер не большой, а просто большое кол-во файлов, то можно сделать tmpfs (в оперативке) тогда будет быстрее удаляться.