Hyper-v, почему медленно пишет диск в гостевой ОС?

Question

[vit451]

Добрый день.

Использую Free Hyper-V , на текущий момент актуальный - это Hyper-V Server 2019.
Есть "старый" сервер, там Free Hyper-V Server 2019 и крутятся виртуалки.
Есть "новый" сервер, куда надо переехать.

Поставил на новый сервер Free Hyper-V Server 2019 , через репликацию перенес пару машин , все ок, все запустилось и работает.
И тут черт меня дернул на новом сервере провести тесты скорости дисков внутри гостевых ОС (на новом сервере PCIe 4.0 x4 SSD, на старом - SATA SSD )
И вот что получается: новый сервер, две гостевые ОС, обе - первого поколения, в свойствах обоих диск подключен через IDE Controler. Одна на Win 10 PRO x64 22H2 , вторая Win 7 Pro x64. Установлены все обновления.
И в обоих скорость чтения 7 000 Mb/s , а вот скорость записи - 300 Mb/s.
Разные гостевые ОС, но скорость записи одинаково низкая и упирается в 300 Mb/s.

Думаю, может это Hyper-V как то некорректно работает с железом нового сервера.

Ок , беру на новом сервере создаю новую виртуалку. Так же выбираю первое поколение. Так же диск подключен через IDE Controler.
В этой новой виртуалке с нуля ставлю Win 10 PRO x64 22H2.
Запускаю тест.
Получаю 6000 Mb/s на чтение и 6800 Mb/s на запись.

Т.е. получается Hyper-V ни при чем, он может отдавать в гостевую ОС полную скорость SSD.
Гостевые ОС тоже совпадают с точки зрения настроек: первое поколение, диск подключен через IDE Controler. Единственно : там где медленная запись - те реплицированы. А там где все ок - установлена с нуля.

Внутри гостевых ОС в диспетчере устройств все одинаково.
Настройки дисков на гипервизоре для этих машин так же одинаковы.

Но почему одна работает ок , а вторая упирается на запись в 300 Mb/s?

Куда копать?

Answer 1

[vit451]

update :
Дело в репликации. Удаляешь репликацию у машины - сразу скорость записи приходит в норму. Даже не надо перезагружать гостевую ОС.
Включаешь репликацию - скорость записи тут же падает до 300 Mb/s.

Почему?

Upd2:
чистая установка Windows Server 2022 Standart с обновлениями на сентябрь 2024, ставим роль Hyper-V, реплицируем для теста одну машину, далее делаю плановую отработку отказа, запускаю машину на новом сервере , проверяю скорость - баг воспроизводится.
При выключенной репликации скорость записи на диск 6000 Mb/s , как только настраиваю и включаю репликацию - тут же падение до 300 Mb/s.

Прогуглил , нашел упоминание о таком , но нигде нет решения.

Answer 2

[Роман Безруков]

На основном сервере все изменения VHD соответствующей ВМ пишутся в лог репликации (Hyper-V Replica Log, HRL), HRL-файл лежит рядом с VHD. Каждому VHD соответствует свой HRL, каждая операция записи внутри ВМ соответствует записи на VHD и записи в HRL. Дальше каждые 5 минут HRL-файл отправляется на сервер-реплику и пишет изменения в конечный VHD.
Из нюансов, которые могут влиять:
1. Размещение дисков ВМ на системном диске (а он форматируется с размером кластера 4К), а у вас этот диск одновременно используют ОС, ВМ и HRL. Кому система отдаст предпочтение? посмотрите на значения RND4K на графиках DiskMark.
2. Перенос ВМ на отдельный диск, отформатированный с размером кластера 64К, должен дать прирост производительности
3. ВМ Generation 1 и IDE-контроллер - в случае с Windows 7/8/8.1 с этим ничего не сделать, в остальных случаях - переезд на Generation 2, а IDE-контроллер - дело вкуса/привычки (у меня имеющиеся Hyper-V VM работают со SCSI).

We recommend that you only use IDE disks for OS disks. OS disks have performance limitations based on the maximum I/O size for their devices.

4. Собственно, ваш SSD. Какой (customer/enterprise), с какой прошивкой и т.д.
5. Журнал "Здоровье" - Hyper-V storage I/O performance
6...

P.S. Я бы начал с выноса ВМ с системного диска на другой, а уже потом - прочие упражнения...

Comments

[vit451]

Добрый день.

Эту проблему фиксирую на конфигурации Ryzen 9 7900 + SSD Samsung 990 Pro.
Виртуалку Gen 2 пробовал - без толку.
Разнести диски виртуальных машин на другой SSD пока нет физической возможности.
Но думаю это не поможет.
Указанные вами пути решения проблемы - это для варианта когда SSD не справляется с нагрузкой.
В моем случае это не так. Если бы SSD не справлялся , то деградация скорости записи должна фиксироваться на всех виртуальных машинах хоста и на самом хосте (ведь это все находится физически на одном SSD )
А у меня деградация скорости записи только на виртуалке с включенной репликацией. При этом на другой виртуалке с отключенной репликацией на этом же хосте скорость в порядке, на самом хосте скорость - ок.
Да и не может такого быть чтобы деградация наступала не позже ни раньше как я нажимаю кнопку "включить репликацию" и прекращалась не позже не раньше как я нажимаю "удалить репликацию".

Вот примеры подобной ситуации

https://forums.servethehome.com/index.php?threads/...

https://learn.microsoft.com/en-us/answers/question...

Ну и вишенка на торте.
Раз пошла такая пьянка решил я протестировать скорости на моем текущем сервере : Xeon E-2176G + диски SSD Kingston DC500M
Тут как раз выполняется рекомендация сам hyper-v на отдельном физическом диске, диски виртуальных машин на другом физическом диске.
Все это работает 24/7 с 2020 года, 10 виртуальных машин, у всех включена репликация.

Беру ту же виртуалку что и выше и запускаю тест.

С репликацией


Удаляю репликацию и тут же запускаю тест



Делал так несколько раз - всегда получал в тестах заметную деградацию записи.

Получается в одном случае Intel , в другом AMD , в одном случае SATA SSD из серверной линейки Kingston , в другом PCIe 4.0x4 SSD Samsung 990 Pro со скоростями 7 Гигабайт в секунду на чтения и на запись.
И там и там прослеживается падение скорости записи внутри виртуалки при включении репликации.
Но только если на SATA SSD это падение примерно в два раза , то для Samsung 990 Pro - это падение в 20 раз.