Как для большей надежности сконфигурировать сервер?

Question

[susnake]

Добрый день.
Приобрели сервер ~2008г. выпуска.
Я бы хотел сделать его как можно более надежным.
Что я понимаю под этим:
1) Отвязка системы от железа (виртуализация). Выходит сервер из строя, перевоткнул в другую машину диски - все заработало.
2) RAID - вышел из строя диск, воткнул новый, данные синхронизировались.
3) Простота в обслуживании. Если вдруг случится такая ситуация, что я покину текущее место работы, то пришедший на мое место сотрудник мог бы быстро разобраться.

В основном у меня вопросы по первым 2-м пунктам:
2. К сожалению в сервере нет аппаратного реда и купить в настоящий момент не предоставляется возможным, можно сделать только фейк или программный. На сколько я понял фейк рейд делать крайне не рекомендуется. Таким образом остается программный.
1. Виртуализация. Вот тут много вопросов, хоть я стати и читал про это. Когда решал на чем поднять виртуализацию, то остановился на vmware esxi (хорошо, что есть бесплатная лицензия). Но когда я чуть не дошел до миграции AD на новый сервер я к огорчению обнаружил, что vmware не поддерживает ни фейк рейд, ни программный.
Отсюда вопросы.
Какое средство виртуализации лучше поставить? Я пока остановился на KVM, но поймет ли, допустим hyper-v файл от kvm? И как будет работать hasp-ключ? Поймет ли он диск (железный), который был создан под hyper-v? Под виндой я знаю, что выводишь диск в оффлайн и можно прицепить его в hyper-v. А с KVM как?
В вики есть статья про Microsoft Hyper-V Server, но я с ним вообще не сталкивался. Он работает примерно также как и vmware? Будет ли он работать, если диски перенести на абсолютно другую машину? Например был сервер на интеле, а стал стационарный ПК на амд?
Да, можно было бы поднять тестовый стенд и на нем все испытать и получить ответы на свои вопросы, но к сожалению из-за того, что я не увидел, что vmware не поддерживает программный рейд я потерял кучу времени, а текущий сервер уже не выдерживает.
И на всякий случай что будет стоять:
OS - Win2k12
Exchange
AD
DNS
DHCP
файловая 1С на SSD.

Comments

[Максим Забелин]

Exchange под KVM - unsupported, то есть все грабли будете разгребать сами. Вендор вас справедливо пошлет в пешую эротическую прогулку, а граблей там достаточно.

[susnake]

Максим Забелин: Спасибо за ответ. Буду знать.

Answer 1

[АртемЪ]

Какое средство виртуализации лучше поставить?

Я бы рекомендовал hyper-v
Бесплатный, отличный по фунцкиональности и производительности, а учитывая то что у вас будет стоять на нем вообще лучший вариант.

Будет ли он работать, если диски перенести на абсолютно другую машину? Например был сервер на интеле, а стал стационарный ПК на амд?

Виртуальная машина будет работать на любом компьютере, где запущен сервер виртуализации.
Т.е на новый компьютер вам нужно будет установить гипервизор hyper-v - после чего вы сможете запускать виртуальные машины.

Точно так же и в других системах виртуализации.
Т.е просто переткнуть диски не получится - нужно сначала поставить гипервизор.
Еще один момент - ни один гипервизор не поддерживает программный рэйд.

Comments

[Алексей Черемисин]

Как же так?! у меня как раз на программном рейде сейчас пяток виртуалок в KVM!

leah@xxx:~$ virsh list --all
 ID Имя               Статус
----------------------------------
  1 asterisk-new         работает
  2 services             работает
  3 mongodb              работает
  4 win7                 работает
  5 transcoder           работает
  - distribs             выключен
  - transcoder-i14       выключен
  - ubuntu-base-i686     выключен
  - ubuntu-base-x64      выключен

leah@xxx:~$ cat /proc/mdstat
Personalities : [raid1] [linear] [multipath] [raid0] [raid6] [raid5] [raid4] [raid10]
md127 : active raid1 sdc1[0] sdb1[1]
      3906885440 blocks super 1.2 [2/2] [UU]

unused devices: <none>

[susnake]

Я бы рекомендовал hyper-v

Спасибо. Буду пробовать тогда.

Виртуальная машина будет работать на любом компьютере, где запущен сервер виртуализации.
Т.е на новый компьютер вам нужно будет установить гипервизор hyper-v - после чего вы сможете запускать виртуальные машины.

Нет, я наверное немного не так написал. Я имел в виду, что выходит сервер из строя (сгорела мать или еще что-то) я вытаскиваю физические hhd из сервера и вставляю их в абсолютно другой ПК. Из опыта пользования десктопом я знаю, что системы на Linux-ядре это переносят спокойно. НО у windows будут проблемы.

Еще один момент - ни один гипервизор не поддерживает программный рэйд.

Ага, а вот этого я не знал...т.е. остается только бэкапы и от рейда придется отказаться, верно?

[АртемЪ]

susnake: Еще раз - просто переткнуть диски в другой сервер не получиться гарантированно!
На другом сервере сначала нужно будет установить гипервизор.
Это не зависит от системы виртуализации!

Поэтому сгорел сервер - инсталлируете на новый сервер гипервизор, переносите диски, настраиваете гипервизор, и запускаете.
Только так.
Простого перетыкания точно не получится.

Вообще если виртуализация используется на боевом сервере, то в большинстве случаев используют СХД. Т.е на сервере виртуализации не хранится данных вообще, они хранятся на СХД.

[АртемЪ]

Я бы на вашем месте отказался от виртуализации.
Виртуализация нужна для удобства и безопасности, но надо понимать что она потребляет ресурсы, и это будет однозначно дороже.

Если же все-таки виртуализация - то берите аппаратный рэйд.

[АртемЪ]

Алексей Черемисин:

Как же так?! у меня как раз на программном рейде сейчас пяток виртуалок в KVM!

А вы попробуйте сделать программный рэйд в каком нибудь гипервизоре, если получится отпишитесь

[susnake]

Я бы рекомендовал hyper-v

Спасибо за Ваш ответ. Да, в текущей ситуации я лучше остановлюсь на Hyper-V. А во что-то отличное от RAID1 я бы и сам не полез. На данный момент :)

Answer 2

[Юрий Чудновский]

К сожалению в сервере нет аппаратного реда

Почему же "к сожалению", ведь аппаратный RAID не совместим с

1) Отвязка системы от железа

Я пока остановился на KVM, но поймет ли, допустим hyper-v файл от kvm? И как будет работать hasp-ключ?

Что-то вы смешали в кучу всё. И да, подключить к виртуалке hyper-v ключ не получится.

В вики есть статья про Microsoft Hyper-V Server, но я с ним вообще не сталкивался. Он работает примерно также как и vmware? Будет ли он работать, если диски перенести на абсолютно другую машину?

Hyper-V есть в двух "вариантах" - как Core Server, который примерно аналогичен esxi - на новом железе, как и любая винда, может тупо не подняться, падая в BSOD; и как обычная виндовс-софтина, устанавливаемая в уже работающую винду (ну, типа назначаемая роль сервера).

Да, можно было бы поднять тестовый стенд и на нем все испытать и получить ответы на свои вопросы, но к сожалению из-за того, что я не увидел, что vmware не поддерживает программный рейд я потерял кучу времени, а текущий сервер уже не выдерживает.

Готового ответа на ваш вопрос не существует. Везде свои нюансы.

Comments

[Алексей Черемисин]

Господа! Hasp и usb и parallel спокойно пробрасываются в KVM!

[Юрий Чудновский]

Алексей Черемисин: Извиняюсь, отвлекли во время написания. Я имел в виду конкретно hyper-v.

Answer 3

[Сергей]

железный рейд редко подпадает под описание "поменял винт и все стартануло" =D. обычно "поменял винт и поседел".
а в остальном мало что нового можно сказать. вмварь ... минимизация ролей виртуалок. бекап как самих виртуалок .. так и данных или конфигов. бекап делать сторонними средствами. и будет вам щастье

гиперви увы .. не поддерживает проброс юсб портов ... увы .............................увыыыыыыыыыыыыыыыыыыыыыыыы =(

Comments

[susnake]

гиперви увы .. не поддерживает проброс юсб портов ... увы .............................увыыыыыыыыыыыыыыыыыыыыыыыы =(

C 1C hasp и Hyper-V вроде проблем нет. Насколько я знаю hasp работает по tcp/ip. По крайней мере у меня файловая база на hyper-v, а hasp ключ воткнут в хост-машину и работает. У меня больше был вопрос как определится hasp в там же KVM.

Answer 4

[Алексей Черемисин]

1) программный рейд! лучше RAID-10
2) KVM + (qcow2 или LVM) - я за qcow2 (!!!), так как нет деградации производительности после снапшотов, да и по скорости совсем не отстает (даже чуть быстрее) от LVM.
3) в KVM можно пробросить практически все. Сами USB-порты я не пробрасывал, а вот отдельные USB-устройства (флешки, ключи, камеры и т.д. ) по ID - постоянно.
4) Чтобы хорошо все работало на windows - нужно ставить virtio-драйверы, благо они есть.
5) в отличии от EXSI, гораздо приятнее работать из командной строки.
6) для управления можно поставить https://www.webvirtmgr.net/

Спрашивайте, с KVM давно и кучу вариантов испробовал, вплоть до проброса SR-IOV оборудования.

Ну и если хотите без напрягов и красиво - https://www.proxmox.com/en/ - дистрибутив all-in-wonder :-) Это если не хотите сами все поднимать и контролировать.

PS. Вот прямо сейчас на одном из серверов.

leah@xxx:~$ virsh list --all
 ID Имя               Статус
----------------------------------
  1 asterisk-new         работает
  2 services             работает
  3 mongodb              работает
  4 win7                 работает
  5 transcoder           работает
  - distribs             выключен
  - transcoder-i14       выключен
  - ubuntu-base-i686     выключен
  - ubuntu-base-x64      выключен

leah@xxx:~$ cat /proc/mdstat
Personalities : [raid1] [linear] [multipath] [raid0] [raid6] [raid5] [raid4] [raid10]
md127 : active raid1 sdc1[0] sdb1[1]
      3906885440 blocks super 1.2 [2/2] [UU]

unused devices: <none>

Comments

[susnake]

Спасибо, буду пробовать.

[Влад Животнев]

> лучше RAID-10
wrong.

Никогда и никому не советуйте рейды, отличные от 1го, если человек задаёт дурацкие вопросы. Все рейды, кроме первого, подразумевают шанс потерять данные, если нет рук.

[Влад Животнев]

> да и по скорости совсем не отстает (даже чуть быстрее) от LVM.
Што?

Файловая система на блочном устройстве медленнее файловой системы на sparse-файле на файловой системе?
Может на всех серверах пора забивать на использование разделов дисков и класть туда qcow в качестве rootfs, ведь какая-то гребаная магия ускорит работу дисков в этом случае =) ?

[Алексей Черемисин]

Влад Животнев: А вы тесты проведите! И будет Вам "Што"! Потом сделайте снапшот на LVM и qcow и еще раз проведите тесты,. Про рейд 10 я просто помолчу, можно?

[Влад Животнев]

Алексей Черемисин:
При чём тут снапшоты? Цитирую:

"да и по скорости совсем не отстает (даже чуть быстрее) от LVM."
Это вы уже после снапшотов написали.

> Про рейд 10 я просто помолчу, можно?
Помолчите, а лучше и в ответе помолчите про него. 99% советующих raid10 не знают, как он работает (лесенка и вот это вот всё), как следствие - не представляют, как его восстанавливать в ситуациях сложнее "один диск вылетел, поменяли".
А современные SATA и SAS контроллеры штука веселая - выстрелить все диски на пару секунд just for fun для них милое дело.

[Алексей Черемисин]

Влад Животнев:
1) По скорости - qcow2 не отстает по скорости от raw LVM. И да, он на файловой системе! Потестируйте, я этим последний раз занимался два месяца назад.
2) LVM - сильно тормозит после создания снапшотов.
3) Если вы привыкли бекапить систему как-то по другому, только раз за вас.
4) LVM тормозит после снапшотов раза в два и на thin provision (ну здесь еще можно и ядро пересобрать!)
5) Я за снапшоты! Так как они просто вделаны и в virsh и в virt-manager и в туеву хучу тулзов. Для работы с ними не нужно прикладывать вообще никаких усилий.
Очень удобно копировать виртуалки, если у вас их под несколько десятков. Да и просто сохранять состояния.
6) А вот со снапшотами в LVM - кроме как для бекапов пока не сильно пригоден. Создал, забекапил, удалил.
7) Не нужно мне рассказывать о современных контроллерах, у меня их есть и много - и не все так плохо! Никто никуда и никогда диски не отстреливает. а если и было пару раз, то из-за дисков, а не контроллеров.
8) RAID10 спокойно чинится и без вопросов. И если именно это камень преткновения, уйх с ним, не делайте. Накатите два RAID1 и слейте в LVM. Или не сливайте.

И не нужно со мной в таком тоне, как минимум мне не приятно. Во первых, я сильно старше. Во вторых, боюсь, мой положительный опыт гораздо больше вашего. В третьих, вы, блин, еще не под , когда я портировал линукс на кучу платформ типа PPC/MIPS и прочую херь году так в 1998!
Я прекрасно знаю что и кому советовать. Если ваш опыт где-то не положителен, может быть стоит подучиться?!

Answer 5

[Максим Забелин]

Вообще судя по вопросам, не стоит вам виртуализовывать ваш продашен прямо сейчас. На кошечках потренируйтесь сперва. Арендуйте IaaS какой-нибудь для экспериментов и попробуйте сделать то что вы хотите, сразу поймете все грабли.

Answer 6

[Влад Животнев]

debian stable, kvm, на стороне управляющей - virt-manager.

Рейды - только единичка (пардон, но вряд ли у вас есть руки, чтобы собрать сошедшую с ума десятку - у меня вот ни разу не получилось), только софтварь.

Можно и под виндой крутить, hyper-v только тогда, а не kvm.

KVM vs hyper-v - вопрос лично вашего удобства, задачи ни капли ни highload.

Единственное что с никсами удобнее - их легче переносить между железом. Переткнуть диски, grub-install с Live-cd и обычно этого достаточно, если диски воткнуты в правильном порядке.