Что съело место на DPM сервере?

Question

[buddh1st]

Добрый день, коллеги, возникла нештатная ситуация, на хосте с dpm 2012 сервером выпали диски (5 рейд развалился, переткнули выпавшие диски, рейд встал на место). Проблема возникла с виртуалкой дпм, на части бэкапов выпала ошибка "отсутствует том", решил:
1. пересоздать бэкап (предварительно очистил старые, с этим проблем нет, есть другие способы копирования).
2. При попытке создать новый бэкап, пишет что не хватает места (в 1 пункте, я удалил старые бэкапы и место по факту не очистилось, куда-то исчезло).
3. Панель мониторинга диска выдает, что свободно только 10% на диске из 40ТБ, но если смотреть через Hyper-V размер диска 40ТБ, а занято всего 27 т.е где-то он потерял 13ТБ. (Повторное сканирование диска результата не дает, по факту он не видит реального обьема).


Подскажите, пожалуйста, может кто сталкивался ?
Пока единственный вариант грохнуть вообще все бэкапы и передобавить диск, но хотелось бы разобраться.

Comments

[tukreb]

Ахаххаха RAID 5 - чел ищи другую работу, пока можешь свалить из будущего ада.

[Максим К]

tukreb, а если чуть-чуть подробнее про 5 рэйд, что с ним нет ак?

[RStarun]

DPM у вас ReFS использует? Если да, то может тут есть проблемы?
Он по умолчанию использовать дедупликацию должен, и наиболее вероятно еще какие-то снепшоты. Тогда удаление не приведет автоматически к удалению всех тех старых копий.
Кстати да - дедупликация очень чувствительна к любым потерям данных. Теряются какие-то 4кб и все затронутые копии на помойку.
Если dpm позволяет - перенести данные на другое временное хранилище, это пересобрать.

[RStarun]

tukreb, для бэкапов норм вариант. Хотя лучше R6 конечно.
Но тут и R6 бы не помог - диски отвалились (слово диски подразумевает количество более 1). В R6 если отвалится более 2х, та же картина будет.

[tukreb]

Максим К, потому что он такой же надёжный как и RAID0, а всё потому что при ребилде огромная (и часто 100%) вероятность, что отвалиться другой диск.

RStarun, для бэкапов есть RAIDZ, а если контроллер не умеет в HBA/JBOD, ну тогда только RAID1.

[buddh1st]

tukreb, если я не ошибаюсь, бегло документацию просмотрел, там 5 рейд вроде хорошо подходит для дпм.

[RStarun]

tukreb, думаю это называется holywar и к делу не относится. Не всем и не всегда нужны SDS, не всем и не всегда нужны ZFS и raidz.
Выход из строя в raidz1 двух и более дисков точно так же карается потерей данных емнип. Это не более чем маркетинг, тот же рейд разных уровней, только с буквой Z.

[buddh1st]

RStarun, добрый день, пересобрать это удалить все копии и группы защиты? Или отмонтировать диск и заново примонтировать к виртуалке ?

[RStarun]

Подключить новую (временную) емкость, мигрировать dpm пул, разобраться со старой емкостью (что угодно, хоть уформатироваться всласть), мигрировать обратно.

[RStarun]

И я могу ошибаться, но нужно бы запустить сами бэкапы. Возможно DPM просто сделал преалокацию и учел что джобы будут занимать указанное место, поэтому вы видите что места нет. Но на самом деле бэкапы могут идти, vhd по мере наполнения данными будет расти.

[buddh1st]

RStarun, была такая мысль да, что кто-то заранее забронировал для себя место.
Но, я же в теории могу полностью форматнуть диск ? И заново создать все задания? Новые задания сами для себя создадут новые тома ? Мне бэкапы текущие необязательно сохранять, простой в несколько дней нестрашен (пока пересоздаю задания на бэкап).

[RStarun]

buddh1st, не могу сказать наверняка, нет под рукой dpm. По идее даже форматировать не надо, надо просто удалить из dpm этот пул и пересоздать его заново. Это если никакие бэкапы там не нужны.

[buddh1st]

RStarun, в любом случае спасибо :) буду пробовать.

[tukreb]

RStarun, Ни какой не holywar, ниразу я не видел чтобы RAID5 отрабатывал как нужно, а я работаю в датацентре и как минимум раз в месяц клиенты, те умники что собрали RAID5, теряют свои данные.
buddh1st, если это ваша идеи в RAID5, то я бы на месте директора уволил бы вас, это бомба замедленного действия.

[RStarun]

tukreb, не работаю в датацентре. Регулярно встречаю ситуации где R5 нормально совершенно отрабатывает. Еще раз - Raidz1 который вы предложили это тот же raid 5 только в профиль. Если будете моим директором - буду использовать то что вы скажете, без проблем.

[tukreb]

RStarun Я не предлагал RAIDZ1, я написал просто RAIDZ. Да даже так, в отличие от железных RAID, RAIDZ умеет исправлять ошибки, когда железные разучились это сделать с тех времён, когда диски перешли на другой метод записи. И там где RAID5 развалиться (ну или уничтожит данные при рибилде) из-за случайно инвертирующего бита, RAIDZ его исправит и продолжит работать дальше.

[RStarun]

buddh1st, получилось что-то хорошее сделать?

[buddh1st]

RStarun, добрый день, извиняюсь, за поздний ответ. удалил все бэкапы, почистил руками тома на диске и все завелось. спасибо за помощь.

Answer 1

[MVV]

Пространство может быть занято теневыми копями содержимого диска.
Посмотреть - vssadmin list shadowstorage из командной строки в режиме администратора. Удалить теневые копии можо тем же vssadmin, начинать надо с самой старой.
Но не торопитесь ничего удалять: фактически это место может быть занято старыми версиями резервных копий. Не знаю, как там в DPM (не работал), но вот Windows Server backup совершенно точно использует старые версии файла с бэкапом (у него это - VHD) как способ хранения предыдущих бэкапов.

Comments

[buddh1st]

Добрый день, спасибо, за предложенный вариант, теневые копии проверял там совокупно на 200-300гб.