Совет по организации NAS?

Question

[The_Immortal]

Задался вопросом организации примитивненького домашнего NAS'а на базе Proxmox'а, внутри которого будет виртуализация необходимого.
В закромах завалялся неиспользуемый простенький мини-ПК: i7-13700H, 2x32GB DDR5 5600 MHz, SSD 128GB, RJ45 2.5Gb, USB4, USB3.2 Gen2.
Также в наличии два новых HDD 2TB WD GOLD (WD2005FBYZ), которые хотелось бы пустить в RAID1.

Вопрос в организации связи м/у мини-ПК и HDD. Изначально планировал найти двухсекционный DAS, доступ к которому бы был по LAN 2.5Gb, но осознал, что такие устройства (с сетью) по сути это готовые NAS'ы, поэтому переключился на USB-коннект - переплачивать за NAS при наличии мини-ПК смысла не вижу.
Нашел два варианта (бренд не принципиален, это чисто пример):

• док-станция 10Gb/s
  
• корпус внешнего жесткого диска 5Gb/s с аппаратным RAID (стоит ~ x2 от первого варианта)
  

Мои конкретные вопросы:

1. Стоит ли гнаться за 10Gb/s, учитывая, что указанные HDD больше 200 МБ/сек не дают?
   
2. Имеет ли смысл переплатить в 2 раза за коробку с аппаратным RAID и не париться по поводу RAID?
   
3. Имеет ли смысл отказаться от аппаратного RAID, выбрать первый вариант обычной док-станции и организовать для HDD программный RAID в Proxmox'е через Btrfs/ZFS (учитывая, что RAM не так уж и много)? Если да, то какая из указанных ФС предпочтительнее на сегодняшний момент?
   

Благодарю!

Comments

[Zettabyte]

примитивненького домашнего NAS'а ...
В закромах завалялся неиспользуемый простенький мини-ПК: i7-13700H, 2x32GB DDR5 5600 MHz, SSD 128GB, RJ45 2.5Gb, USB4, USB3.2 Gen2

Если вдруг решите отказаться от сборки "примитивненького НАСа" и выкинуть "простенький ПК", чтобы не собирал пыль на антресолях, маякните пожалуйста - думаю, что смогу избавить вас от этой рухляди :))

[Drno]

Zettabyte, плюсую)))

Answer 1

[rPman]

Важнейший вопрос тут - для каких задач будет использоваться NAS.

1гбит будет давать до 110мбайт/сек, для hdd особого смысла выше нет (только если это будет бесплатно, что обычно не так, так как 2.5Gb коммутаторы все еще дорогие), так как высокие скорости (200мб/с) достигаются только при линейном копировании больших файлов и при отсутствии фрагментации... во всех остальных случаях скорость может упасть 10кратно... и не утилизирует сетевой канал.

Второе - по какому сетевому протоколу будет обеспечиваться доступ к файлам... Например самые быстрые - iscsi/nbd/aoe (потому что позволяют кешировать локально даже записи, ОС знает до каких пор), но они только блочные устройства транслируют... дальше идет linux nfs и где то в конце майкрософтовский smb (он на мелких файлах может чуть ли не кратно ронять скорость)

Теперь важный ответ про RAID, никогда не используйте дешевые 'аппаратные' raid контроллеры (не серверные, те что с кешем записи и батарейкой), пользы они вам не принесут никакой а вот гемороя административного добавят (например вендорлок, при смене материнки/контроллера пересобирать рейд). Пользуйтесь программным рейдом, он есть как в windows штатно (даже в десктопных ОС если pro версия) так и конечно в linux (mdadm или штатная фича файловых систем btrfs/zfs).

По поводу конфигурации... подбирайте корпус mini pc что бы диски были внутри и подключались по своему штатному коннектору, в вашем случае sata, так как внешние usb контроллеры могут добавить багов (например не будет виден smart дисков или уберут поддержку trim для ssd) и главное, конструктивно эти наружу торчащие провода можно задеть и сбросить диски 'со стола'... NAS должен быть удобным и монолитным, и 'с ручкой для переноса'.

p.s. покупать аппаратный raid с корпусом (домашние ревизии) имеет смысл когда есть желание получить готовый результат без усилий, за это и идет доплата в цене, по сравнению со своей сборкой, выбирайте либо вы собираете либо за вас. Ну и функционал готового рейда обычно лимитирован софтом, который там запущен, когда как свой linux - максимально полнофункционален но конечно не так удобен, плюс никто не мешает и тут такой же софт поставить с UI.

Comments

[The_Immortal]

Благодарю за пост!
Дело в том, что мини-ПК на то и мини, что туда кроме одного 2.5" ничего не впихнешь, а из этого каши не сваришь. Поэтому хранилище из 2ух HDD буду подключать через док-станцию по USB.
При это также понял, что гнаться за 10 Gb/s для HDD смысла нет. И что с приведённым мною в качестве примера аппаратным RAID смысла связываться нет.

[rPman]

хранилище из 2ух HDD буду подключать через док-станцию по USB.

вы эту кашу из проводов представили? где все это будет размещаться? Ронять работающие hdd не рекомендуется!

НАСТОЯТЕЛЬНО рекомендую подобрать корпус, благо вариантов мини пруд пруди (в т.ч. для 2 hdd 3.5)...

например формфактор slim

или такой (для mitx)

[The_Immortal]

rPman, каша уже и так есть: коммутатор с проводами - находится все это дело под потолком, кот даже не добирается. Ну и туда дополнительно добавятся две коробочки: мини-ПК и док-станция с двумя HDD, между которыми будет коротенький type-c.
По поводу целей NAS. Домашнее облачное хранилище (фото/видео-бэкапы с мобильных устройств, возможность их просмотра, просмотр-редактирование документов), видеонаблюдение, zabbix, torrserve, adguard и всякие сетевые штуки. В общем, пока ничего особенного.

Answer 2

[aleks-th]

Ставь truenas, можно под тем же proxmox в виртуалке запустить, там все просто, в 10 кликов настраивается и что удивительно - работает.

Докстанция - нафига спрашивается нужна, преимуществ она не даст а вот проблем может добавить.
Аппаратный рейд в данном случае смысла нет, его нужно или совсем хороший ставить, а это стоимость можно 10 умножить, или программный лучше справится.

Тот же Truenas с zfs, из коробки сделает любой уровень рейда, и будет работать лучше, и самое главное предсказуемее, кустарных типа аппаратных решений...

Answer 3

[Drno]

зачем проксмокс? ставьте openMediavault и всё...
програмного линуксового mdadm хватит

Comments

[The_Immortal]

Proxmox для виртуализации парочки машин, в т.ч. и для NAS'а. Но вопрос больше не в этом.

Т.е. с аппаратным RAID (например, от ORICO) лучше не связываться?

[Петровский]

Жирно будет 64Г на OMV.

В 2 раза по стоимости лучше не связываться, мне кажется.

OMV настолько плох, что я использую Openwrt+Btrfs на виртуальную в Proxmox

[Drno]

The_Immortal, ненужен Вам дома аппаратный рейд
Делать nas на виртуалке это глупость.

Во первых будет медленный диск, во вторых если этот огромный образ виртуалки повредится - все данные Вы потеряете. В отличии от того если повредится hdd - часть инфы можно будет достать.

Nas надо размещать на физических дисках, данные…

Почему там кому то ненравится openmediaVault я хз… хорошее и стабильное решение для наса. Ну или какой нить xenology можно

[The_Immortal]

Drno,

если этот огромный образ виртуалки повредится - все данные Вы потеряете. В отличии от того если повредится hdd - часть инфы можно будет достать.

Вот тут не понял. У меня хранилище под виртуалки (виртуалку с NAS, в частности) планируются быть на HDD1. При этом на HDD2 будет зеркалирование с HDD1 посредством RAID1. Почему все данные в этом случае должны сразу потеряться?

[aleks-th]

Drno,
Я согласен аппаратный рейд, в этом случае нафиг не нужен. Будет лишней точкой отказа.
---
А со скоростью ну не все так страшно, тупо прокидываем диски напрямую в виртуалку и все. В проксмокс это не очень удобно, нужно в конфиг одну строчку вручную вносить.
Но работает и работает нормально, и скорость в этом случае не теряется.

[The_Immortal]

aleks-th,

тупо прокидываем диски напрямую в виртуалку и все

А я планировал прокинуть диски не в конкретную виртуалку, а указать их в качестве хранилища в самом Proxmox'е и RAID1 при этом задать. Ну а сами виртуалки уже на этом хранилище гонять.
Так разве нельзя?

[aleks-th]

The_Immortal, можно, но
Лишний уровень абстракции = лишняя точка отказа.
Скорость будет заметно ниже ниже это раз.
Будет сильно сложнее вытащить файлы если накроется какой-то из образов диска это два.

Собственно если это не критично то делать можно.

Подойдет или нет - нужно тестировать предварительно .