Как узнать, сколько гигабайт было записано на HDD диск?

АртемЪ,

К этому надо быть готовым ставя любой диск
А от потери данных защищает бэкап и только он.
Хранить единственную копию критичной информации это плохая идея.

Совершенно верно, согласен полностью.

неважно HDD или SSD. Энтерпрайз или пользовательский. Диск энтерпрайз класса сам по себе не надежнее пользовательского

Это не так. Если нет такого, что "не повезло" (например, коробку с дисками швыряли грузчики), то серверный HDD имеет намного более низкую вероятность выхода из строя, чем современный SSD за три пятьсот.

А вот на каком накопителе ее хранить - совсем без разницы.

Я считаю, что если речь идёт о современном бюджетном ССД, то есть. Если есть хороший жёсткий диск, то с горем пополам можно пользоваться. Однозначно, надеясь на авось, но вероятность того, что "прокатит" (до покупки нового сервера) есть и она неплохая.

А вот если бы я увидел "сервер" на основе бюджетного потребительского ССД (ещё и одного), у меня бы свело челюсть - это натурально по рельсам к обрыву на полной скорости.

не факт что подойдет ну и покупка БУ дисков это в любом случае не стоящая идея. И SMART не панацея

Просто SATA-диск должен подойти, не надо брать разные вендорские варианты. По моему опыту, это будет однозначно лучше покупки нового современного SSD, сделанного на TLC / QLC / V-NAND / 3D-NAND и прочих "инновациях".

Исключений пока не встречал, хоумлаберы с реддита массово подтверждают.
Единственное, которое могу придумать - это дебил, использовавший сервер в африке, котельной, или поставив его на батарею. Но это уже везение сродни грузчикам, кидающим коробки.

воткнуть EVO в массив это конечно занятное извращение. Но диск то тут при чем? Претензии тут должны быть не к диску, а к тем извращенцам

Хайп был настолько силён, что ослепли даже те, кто обязан быть начеку.
Перспектива хорошо сэкономить опьянила окончательно.

Как узнать, сколько гигабайт было записано на HDD диск?

АртемЪ,

серверный это производительность, а не большой ресурс записи

Это категорически не так.
Настолько не так, что я не совсем понимаю что и как нужно объяснять по данному вопросу.

Как вариант (и чтобы не растекаться мыслью), посмотрите качественные описания энтерпрайз-линеек. В них вы найдёте деление на read-intensive и write-intensive workloads. Или на read-centric и write-centric drives, в зависимости от терминологии.
Предлагаемые для них модели будут разными.

Скорость (серверная скорость) - это будет уже отдельный класс с красивыми названиями наподобие mission-critical. Различные caching storage и IO accelerators. Модели, кстати, тоже будут разными.

Сравните, например, упомянутое Анастасией выше значение TBW со спецификациями Micron M510DC:

Over-provisioning можно выставить на любом пользовательском - это не проблема

Про over-provisioning писал вот тут: Уменьшает ли деление ssd на лог. разделы его срок службы?

А на пользовательских TLC и хуже ... А вот к ресурсу по записи это отношения не имеет

Вы, должно быть, так шутите?
Как можно считать одинаковым ресурс, например, eMLC с 20 000 - 30 000 циклов перезаписи, и TLC, у которого заявляют 3 000 - 5 000? Хотя я полагаю, что там вряд ли больше 3 500 даже в самых дорогих дисках на его основе, а 5 000 - это был сверхудачный чип при работе в лабораторных условиях.
Про SLC с его 90 000 - 100 000 даже и говорить вряд ли стоит.

Как узнать, сколько гигабайт было записано на HDD диск?

Анастасия,

вы имели ввиду, что они ломаются все?

Выходят из строя вообще все ССД :) Вопрос лишь в том, как скоро это произойдёт.

Я имел в виду, что в своё время был очень сильный хайп по поводу сверхнадёжности SSD Samsung. На него повелись в т.ч. и те, кого вроде как надо называть профессионалами.
И жёстко обломались - для серверов, работающих в датацентрах, диски в которых объединены в RAID-массив, ресурса тогдашних Samsung EVO не хватило совсем. Заменять их приходилось массово и регулярно.

В итоге не то, что сэкономить не получилось, вышло даже дороже покупки подходящих для этой задачи дисков.

Как узнать, сколько гигабайт было записано на HDD диск?

АртемЪ,

в плане ресурсов по циклированию он ничем не отличается

Что вы имеете в виду?

Серверный SSD можно купить на MLC. Over-provisioning (т.е. реальный объём чипов памяти) у него будет не в пример больше. Будут технологии наподобие Micron'овской RAIN, конденсаторы на плате, и т.д.

В результате и надёжность и endurance будут намного выше.

Как узнать, сколько гигабайт было записано на HDD диск?

Анастасия,

мы думали поставить туда m2 диск на 150тб TBW, который стоит в районе 3500 рублей

Можете ставить и такой, но тогда главное - чтобы вы были полностью готовы к потере всех данных с такого SSD. Например, имели автоматические бэкапы, которые делаются достаточно часто (для вас) и регулярно проверяются на восстанавливаемость.

Без этого хранить единственную копию критичной для бизнеса базы на современном потребительском ССД - это очень, ОЧЕНЬ плохая идея. Ещё и М2, которые любят греться.

ставить туда действительно что-то серверное мы не думали, да и дорого это

Можете подумать над покупкой б/у серверного SSD. Продавцы подобного железа нередко выкладывают скриншоты SMART, по которым можно оценить износ.

как настроить HWiNFO, чтобы потом можно было через пару месяцев снять результаты?

Так вы программу-то скачайте. Я специально дал ссылку на portable, по сути, SFX-архив, даже инсталлировать не нужно.
Запустите её с галкой "Sensors only", там будет таблица с тьмой параметров, среди них в разделе с диском будут "Write total" и "Read total".
Кстати, программа что-то показывает даже если не запускать её при старте компьютера. Возможно, подтягивает откуда-то значения, но тут надо смотреть доки.

сервер на ночь выключается

Тогда, видимо, только скидывать значения в какой-нибудь Excel по вечерам перед выключением. Я полагал, что сервер работает 24/7.

у меня дома на компьютере SSD Samsung EVO 860 и там 150 TBW, но я успела "записать" в него уже 26 тб

Правильно делаете, что обращаете внимание. Как раз EVO (цифры не помню) некоторое время назад люди начали ставить в RAID10 на полноценных серверах, а потом покупали их коробками на замену.

Кстати, у многих производителей исчерпание TBW считается негарантийным случаем, т.е. если диск выйдет из строя, то не поменяют. Даже если срок гарантии в месяцах не истёк - там условие "или".

Как уведомлять в телеграмм от mdadm?

Евгений Воробьев, Спасибо!
Только сейчас добрался до изучения, идея отправлять сообщения curl'ом - отличная.

Как уведомлять в телеграмм от mdadm?

Евгений Воробьев,

Уведомления в телегу настроил

Если не затруднит, подскажите каким образом вы организовали отправку сообщений в телеграм с помощью .sh-скрипта?

Встречались ли вам овер-инженеры среди джунов и миддлов? Как надо с такими поступать?

Нужно ли с этим бороться - вопрос.

А чтобы можно было ответить "что делать" или "как работать", уточните пожалуйста свой статус/должность в проекте и по отношению к упомянутому человеку.

Также будет хорошо, если добавите возраст (а то его 21 год упомянули, а про свой - ни слова).

Существует ли ноутбук с E-Ink экраном?

Developer, Ты удивишься, если внимательно перечитаешь мой изначальный ответ на вопрос.

Существует ли ноутбук с E-Ink экраном?

Developer, Вы, должно быть, так шутите?

Существует ли ноутбук с E-Ink экраном?

Developer, Так покажите их нам. Думаю, что не мне одному будет интересно взглянуть.

Как исправить ошибку на сервере t430 powerEdge?

Дмитрий, В зависимости от "происхождения" сервера, рассмотрите также вариант обращения в поддержку.

Мы видим большинство серверов когда уже всё плохо и решаем проблемы, которые саппорту и близко не под силу, так что опыт с поддержкой ноутбуков Dell у меня побольше.
Они относятся к клиентам на удивление лояльно - например, можно перевести на поддержку в России машины, купленные зарубежом.

С серверами надо всё-таки разбираться, но я бы сразу этот вариант не отбрасывал.

Кроме того, убедитесь, что точно нет человеческого фактора, т.е. вы думаете, что "сервер стоял просто без включения", а на самом деле кто-то что-то всё-таки делал, и теперь не то, что не признаётся, а наоборот, прикладывает усилия, чтобы не узнали.
По нашему же опыту работы, информация от клиентов о том, что "точно ничего не делали" нередко бывает по качеству как у доктора Хауза.

Управление дисками не видит HDD? Нет файловой системы?

Max,

и диск заработал

Если сейчас всё заработало, то гуд - всё хорошо, что хорошо кончается.

Кроме того, если не затруднит, могли бы вы написать полную модель вашей материнской платы? А то на АМД мы их как-то совсем мало видим, интересно разобраться в ситуации когда в БИОСе диск виден, а в Тестере - нет.
Хотим эту ситуацию поправить.

Сколько максимально SATA линий поддерживает материнка через PCIe-x1 адаптеры?

больше 12 система не видит?

Вот эта программа увидит все ваши хоть сколько-то живые диски, выдаст подробную информацию о них, и сможет их протестировать при необходимости: https://rlab.ru/tools/rtester.html

сколько максимально SATA винчестеров я смогу подключить

Опишите задачу более конкретно. Вы можете на какой-нибудь хламаде взять б/у полку SuperMicro, LSI 9200-8E / 16E и подключить хоть 24 диска разом.
Можно даже ультрасэкономить и вместо полки купить только бэкплэйн, но тогда нужно будет ещё поработать руками.

Уменьшает ли деление ssd на лог. разделы его срок службы?

АртемЪ,

если оставляет пользователь - это over-provisioning

Такое определение скорее неверно, чем верно.
Хотя бы потому, что тогда пропадает название для

Завод в любом случае резерв оставляет

Я сейчас бегло погуглил и вижу, что судя по всему, термин "вытащили в пользовательский оборот" маркетологи, причём те, которые более ушлые.

Изначально over-provisioning'ом называлась именно зарезервированная на заводе область, которой никак нельзя управлять. Я этот термин в своё время взял из документации к серверным SSD Micron, которую просто так даже не скачаешь - надо заполнить подробную анкету на 5 шагов, которую потом ещё будут аппрувить вручную.
Я там брал только документацию и firmware, может и был софт по управлению, но я играть с подобными вещами не собирался. В документации про изменение размера резерва мне ничего не встречалось.

Сейчас у всяких Seagate и Transcend активно расписывается про управление overprovisioning и скромно упоминаются смешные 7%.
Я так понимаю, что это сделано с целью как минимум, сэкономить на памяти (можно ставить меньше), но возможно, и для появления возможности отказывать по гарантии в случаях исчерпания ячеек под reallocate. Типа "наступил износ 100% или выше".

Смотрите на более "каноничных" производителей ССД:

-- Intel:

Each SSD has factory over-provisioned area. This provides an SSD controller with the spare capacity needed to move the data around when programming or erasing partially invalid pages or blocks. This area is not addressable by the host/user and may vary in size depending on SSD model and capacity.

-- Вышеупомянутые доки Micron лежат где-то на работе, быстрый поиск по доступным открыто, вроде как сообщает, что у них изменение объёма называется Flex Capacity. Причём их тоже, видимо, потянуло в маркетинг, т.к. в наиболее старой ревизии, которая нашлась, это сначала называлось FlexCap.

The Flex Capacity feature allows you to change the capacity of a drive to help improve drive endurance. This feature changes the user allocated space, which limits the amount of data that can be stored on the drive. The capacity you set appears as the drive's new capacity in the OS; the remaining capacity becomes available to the drive for the purpose of performing background activities, which can help extend drive life.

В любом случае, наиболее старая ревизия, которую я нашёл сейчас, от 2016-го года. Меня же тогда интересовали SSD на MLC, которые примерно годом старше.

Как защититься от DDOS-атаки однотипными запросами к несуществующим файлам?

Sand, Не думаю, что с ним случится что-то страшное, если это действительно вирус.

Но когда 24/7 идёт по 50 запросов в секунду, нужно быть большим разгильдяем, чтобы это не заметить. Даже банально по проседанию скорости.

Плюс посмотрите ниже про подозрения на (явно неумных) конкурентов.

Уменьшает ли деление ssd на лог. разделы его срок службы?

Clementino,

как раз в софте от самсунга для их же ssd есть "over positioning"

Вообще, термином over-provisioning должна обозначаться часть реального объёма чипов памяти, изначально недоступная пользователю. Она "отрезана" ещё на заводе и работать с ней может только микропрограмма диска.
Вы не сможете её оставить неразмеченной, неотформатированной, и т.п. Вы просто не увидите её нигде, кроме спецификаций.

У хороших серверных дисков такой зарезервированный объём может быть и 25%, и 33%, и, вроде бы, даже больше.

Уменьшает ли деление ssd на лог. разделы его срок службы?

John Smith,

я правильно понимаю, что нудно принимать во внимание всю емкость SSD?

Да, разумеется, речь, о полном объёме. Постарался написать поточнее, прошу извинить, если запутал. Сейчас попробую немного подправить.

если диск 1тб, есть раздел, условно, 100 гб, остальное в другом разделе, но свободное, а первый раздел заполнен практически полностью - диску, по идее, должно быть все равно (как чувствует себя ОС на заполненном под завязку разделе

Всё верно, "размазываться" данные должны нормально, ни про какие разделы микрокоду диска неизвестно, встраивать туда интерпретаторы всех возможных файловых систем и вариантов управления разделами было бы безумием.

В описанном вами примере "слететь с катушек" может только ОС, если вдруг забьёт свой раздел под завязку.

Не исключаю, что в каких-то сильно крутых ССД (например, для СХД) может быть реализовано управление записью, но я о таком не слышал, и сходу не представлю для чего оно может быть нужно. В любом случае, если они вдруг и существуют, полагаю, что 99% посетителей тостера такие диски даже в руках не подержат.

Почему выполняется редирект с HTTPS на HTTPS?

with nginx reverse proxy

Судя по всему, проблема была как раз в прокси.

RewriteCond %{HTTP:X-Forwarded-Proto} !https

Собственно, поэтому я и предлагал вам через PHP посмотреть в т.ч. и эту переменную.

После переименования дополнительного жесткого диска, ноутбук стал тупить, некоторые программы, файлы, папки перестал открывать. В чем причина?

ArtJH,

Завтра иду к мастеру, посмотрим что скажет

Если на диске важная информация, то будьте КРАЙНЕ осторожны с различными компьютерными сервисами, ремонтами ноутбуков, и тем более, админами по вызову и "программистами"!
Они могут нормально выполнять базовое обслуживание компьютеров, но не иметь оборудования именно для восстановления данных (оно дорогое), а также достаточного объёма знаний по работе с жёсткими дисками.

В результате будут использовать какие-то простые программы "домашнего" уровня, и тем самым сильно ухудшат ситуацию, или вообще добьют диск. К нам регулярно поступают такие заказы.

У вас, судя по описанию, пока что простой (для специалиста по восстановлению, не для ремонтника!) случай. Оцените ситуацию трезво с точки зрения того, что случится, если этот момент будет упущен. На всякий случай, вот краткая универсальная памятка о выборе сервиса восстановления данных.