Отказоустойчивый кластер на сетевом хранилище NAS?

Question

[Тема]

Доброго времени суток, хочется построить мини отказоустойчивый кластер из двух серверов и внешним хранилищем под виртуалки. Подскажите пожалуйста будет всё это работать со следующей конфигурацией:
-два сервера с 10Gb-ми сетевыми картами
-NAS с 10Gb-ой сетевой картой и Windows Storage 2012

Answer 1

[athacker]

Кластер будет работать даже с 8 серверами и гигабитными линками. Чем вызваны сомнения, что это будет работать?

Answer 2

[Тема]

Сомнения в самом NAS, этож не SAS, я понимаю что такое iSCSI. Просто если брать хороший NAS и он не заработает в такой связке, мне просто оторвут руки и вставят на другое место. Вообще в планах - два сервера в кластер, на них Hyper-V, по 10Gb от каждого к NAS-у, на самом NAS-е храним виртуалки ОС и БД MS SQL, в случае отказа одного из серверов - всё хозяйство мигрирует на другой сервер с минимальным временем в онлайне. Вот так получится сделать из сетевого хранилища - "полноценный" СХД?

Comments

[Дмитрий]

а что вы будете делать в случае отказа этого nas? Посмотрите на hyper-v 2016, там вроде стедали репликацию в storage spaces. Или заморачивайтесь с linux и drbd

[athacker]

bonito0any: Товарищ, у вас каша в голове. NAS -- это просто такой термин. Который подразумевает, что у вас наружу из устройства презентуется готовая ФАЙЛОВАЯ СИСТЕМА. По протоколам типа SMB или NFS. И больше ничего. Это никак не специфицирует ни количество интерфейсов, ни их скорости, ни типы дисков внутри, ни даже типы дисковых массивов (RAID и пр.).

iSCSI -- это такое ПРОТОКОЛ. С помощью которого презентуются БЛОЧНЫЕ УСТРОЙСТВА. И сам по себе iSCSI, опять-таки, не специфицирует ни количество интерфейсов, ни их скорости, ни типы дисков внутри, ни даже типы дисковых массивов (RAID и пр.).

Вопрос "как сделать из NAS полноценный СХД" сродни вопросу "как сделать из парового двигателя машину "Запорожец". Оно вроде и одно -- машина (в терминологическом смысле), и другое -- машина, но есть, как вы понимаете, нюанс.

Что касается СУТИ вашего вопроса. Из бытовых NAS вы промышленную СХД не сделаете. Никак. Потому что промышленная СХД имеет как минимум 2 контроллера, работающих вместе. И СХД остаётся доступной даже в случае вылета любого из её контроллеров. На базе NAS вы можете сделать ОБЩЕЕ ХРАНИЛИЩЕ для кластера. Т.е. ваши хосты будут иметь одновременно доступ к некоей файловой системе, на которой они смогут хранить виртуалки и т.п. Но ваш NAS останется единой точкой отказа. Если на нём ляжет, например, материнка, то всё -- приходи, кума, любоваться...

Есть варианты организации отказоустойчивых NAS-ов. Это, например, Microsoft SoFS -- ScaleOut File Server. Но это минимум два сервера и общая для них корзина DAS, подключенная по SAS к обоим из них, с презентацией файловой системы по SMB3 по нескольким сетевым линкам. Но воспользоваться этой схемой смогут только хосты на базе Hyper-V, больше никакие гипервизоры хранить виртуалки на SMB3 на текущий момент не умеют.

Есть вариант организации отказоустойчивых блочных устройтв. Железная схема та же -- общая корзинка DAS, подключенная по SAS к двум и более серверам.

ЛИБО, если брать блочные устройства, как справедливо заметил оратор выше -- два сервера, каждый с локальными дисками, и собранные в сетевое зеркало на базе DRBD. Презентовать это зеркало можно по multipath iSCSI.

Есть вариант сделать то же самое на базе FreeBSD -- там есть чудо-модуль GEOM gate (ggate). Он позволяет сделать аналог RAID1, только из двух серверов. Презентовать можно такое зеркало также по multipath iSCSI с помощью ctld.

Возможно, в вашем случае будет реально самым простым вариантом купить корзинку DAS с внешними SAS-интерфейсами, и подоткнуть её напрямую в SAS HBA, воткнутые в сервера. Тогда вы реально получите отказоустойчивое хранилище, напрямую подключенное к вашим серверам. И да, виртуалки смогут переезжать между серверами в случае отказа одного из них.

Вы можете использовать свой NAS, если вас беспокоят отказы ТОЛЬКО СЕРВЕРОВ ВИРТУАЛИЗАЦИИ. Да, там тоже будет доступен этот функционал -- что в случае отвала одного из серверов виртуалки перезапустятся на оставшемся. Но NAS остаётся узким местом -- если он ляжет, то ляжет всё. И это никак не зависит, 10G там интерфейсы, или 1G.

[athacker]

bonito0any: А, ну и да. У вас есть вариант организации ОТКАЗОУСТОЙЧИВОГО ОБЩЕГО хранилища на базе какого-нибудь SDS (software-defined storage). Таких, например, как EMC ScaleIO, DataCore или Ceph. Но для их работы нужно как минимум три сервера, а лучше ещё больше. Так что имеет смысл взять сервера послабее, но побольше количеством. ScaleIO может презентовать хранилище для VMware, Hyper-V и KVM, работая прямо на гипервизорах. Ceph умеет работать только с KVM, либо придётся мутить схему раздачи на гипервизоры через DRPD и multipath iSCSI. DataCore вроде бы умеет тоже VMware и Hyper-V.

[Тема]

Как говорится "Разжевал и в рот положил", спасибо, теперь есть пища для размышления.