Как найти все файлы содержащие нули?

Question

[dbama]

В результате сбоя винтов побились файлы документов.
Вроде восстановление прошло нормально, но потом обнаружилось что часть файлов восстановились некорректно. Размер и имя файла правильное, но сам файл битый. Точнее забит 00h если смотреть hex редактором.
При выборочной проверке такие файлы не попались и теперь в базе есть документы битые.
Не могу придумать как найти все такие файлы.
Может кто подскажет как правильно прописать параметры для grep, чтобы получить список файлов и папок где они лежат?

Comments

[Viktor T2]

https://stackoverflow.com/questions/6319878/using-...
https://askubuntu.com/questions/1295493/how-to-fin...

[Adamos]

Имхо, изначально задача поставлена некорректно. Найти файлы с бинарным нулем можно, но ноль вполне может быть и в валидных файлах.
Нужно - проверить, не поломались ли файлы.
По этому поводу недавно здесь же был вопрос: Как проверить 500 000 файлов word,exel,pdf ,txt что они не битые?

[dbama]

Adamos, Весь файл состоит из нулей. То есть, искать не один ноль, а файл весь состоящий из нулей.

[dbama]

Viktor T2, Спасибо, буду пробовать эти варианты

[Adamos]

dbama, у файла на несколько блоков битым может быть только один - так что нули будут не во весь файл. Однако файл будет битым.
Вообще, при дисковых проблемах файл может не иметь ни одного нулевого блока - но при этом быть солянкой из черт-те чего, просто что-то другое было записано в том блоке, который приписан этому файлу.
По вашей-то логике вообще достаточно пробежаться по папкам find + gzip и вывести файлы, у которых размер архива будет меньше килобайта. Но частично битые файлы этот метод не отловит.

[dbama]

Adamos, Нашли около десятка файлов. Весь файл состоит именно из нулей. Файлы имеют разный размер.

[dbama]

Для примера. Один из таких файлов.
https://disk.yandex.ru/d/gab5z0Eu7iSqXA

[dbama]

Viktor T2, Ваша вторая подсказка помогла, спасибо большое

[Виктор Таран]

проверил ответ GPT верный, на такие простые вопросы он дает ответы или верные или уж точно похожие на правильный результат. не всегда оптимальный но рабочий.

[dbama]

Виктор Таран, Век живи, век учись
В сторону ИИ даже не думал.
Попробовал - работает. Буду знать

Answer 1

[nihi1ist]

grep -irl "что ищем в файле" /где/ищем

Comments

[dbama]

Как grep обьяснить что ищем?
Как бы вот этот момент не смог вчера сходу решить

[pfg21]

dbama, а что ищем ?? нужны еще дополнительные условия ??

[nihi1ist]

dbama, откройте файл обычным редактором. Если он вообще пустой, то ищите пустые файлы или файлы определённого размера с помощью find, если что-то есть и оно достаточно уникально, ищите с помощью grep.

[dbama]

Побитые файлы в hex редакторе так выглядят


Файлы разного размера, расширения и наименования.

Возможно искать по hex ?
Типа файлы с 10 нулями...
"00 00 00 00"
Как то так

[nihi1ist]

dbama, а содержимое в обычном текстовом редакторе (nano, vim) какое?

[dbama]

nihi1ist, В зависимости от величины файла меняется длина строки
Это в нано

[nihi1ist]

dbama, ну вот, подставляете grep эту строку, можете попробовать с ключом -E и регулярками. К примеру [^@]* если регулярка не подходит, найдите онлайн конструктор, в котором пробуйте различные варианты. Или подставьте пять таки комбинаций. Думаю так тоже пройдет.

Answer 2

[mayton2019]

Не уверен что регулярки помогут. Но я-бы видел поиску нулей как-то такой интеграцией.

find . -name '*bills*' -exec is_file_contains_zeroes {} \;

здесь find - стандартная утилита а is_file_contains_zeroes вам напишет любой программист за 15 минут.

Но если битый винт содержал именно ДОКУМЕНТЫ то правильнее всего их искать именно валидатором
документов а не искателем нулей. Выше Adamos вобщем-то дал правильную линку на дубль этого вопроса.

Ну и на будущее чтоб не "бились винты" - делай бекапы. Потому что игры в восстановление - это не
production ready сценарий и за такие документы уже никто не даст цену. Грубо говоря они стали
мусором. Сомневаюсь что валидаторы закроют 100% сценариев разрушения.

Comments

[dbama]

Где найти "любого программиста"? Можно не отвечать, просто ремарка...

Нет, нужно именно найти такие файлы
Подсказали правильно, такой поиск верно отыскал все файлы. Вроде как...
find . -type f ! -empty -exec grep -zvFxL '' {} +

На будущее - да все есть, просто неожиданное восстановление, которое сказало все ОК
Нашли все файлы, из бекапов заменим

[mayton2019]

dbama, я-бы мог это написать. Но это слишком банально. Тем более что ChatGPT
отлично решает подобные задачки. Они - типовые.

Answer 3

[Noder SS]

find / type f | xargs grep -H "0"