Знаете ли вы технологии запуска игр по локальной сети?

Question

[Shenter]

Добрый день. Подскажите, советом, или объясните почему это невозможно.
Есть задача сделать игровой зал на 40-80 ПК. Единственное ограничение - игры должны запускаться на 1 (или не 1) сервере, а клиенты должны подключаться по локальной сети. И при этом на них должны запускаться без задержек игры уровня PostScriptum
Есть текущая виртуализация на основе VmWare Vsphere и тонких клиентов, но в нем даже офисные программы работают с задержкой. Есть решения удалённого запуска игр, но они закрыты и все запускается на сторонних серверах.
Перебирал варианты с vnc, VMWare и даже RDP - ни одно не дает необходимой производительности, а без покупки невозможно провести тесты, а покупать без тестов смысла нет.
Возможно, у кого-то есть подобный опыт. Бюджет не имеет значения

Answer 1

[CityCat4]

Бюджет не имеет значения

В этом я весьма сомневаюсь. Потому что при "размер не имеет значения" - просто идут и покупают N лицензий на игруху и тупо ставят.
Потому что:
- ни одна технология удаленного управления не рассчитана и никогда не будет рассчитана на "удаленный запуск игр на дорогом железе" - она не для этого от слова совсем.
- игре нужна видеокарта - без нее она тупо не встанет. Значит, Вам нужна видеокарта класса Nvidia GRID и не одна (а сколько - нужно посчитать). Стоимость одной видеокарты Nvidia Grid - 150 - 200 тысяч (это не шутка). Насколько я понял - на эти деньги можно купить 150 лицензий PostScriptum :)
- есть способы проброса обычных видеокарт в виртуалку. Но они работают не везде, не всегда, требуют подбора железа и все равно требуют сервер типа биткойн-фермы - с кучей натыканных видеокарт. То есть у Вас будет десяток таких серверов и необходимость найма весьма квалифицированного админа (потому что взлетает это все только на линухе, только в KVM/Proxmox).

Comments

[Shenter]

В этом я весьма сомневаюсь

Дело не в попытке сэкономить на лицензиях на игру. Конечно, 300 миллионов тут, наверное, перебор, но мне нужно определиться с технологией и озвучить цену, т.к. сказать просто "это дорого" будет недостаточно. Боюсь, что если я скажу что нужно 80 видеокарт стоимостью 200 тысяч, это будет приемлимо по цене, а работать в итоге не будет. Тут политическое решение, главное - чтобы было все централизованно.
С Линуксом не проблема, с проксмоксом дело имел, если нужно будет разобраться с пробросом железа, думаю, разберусь.
Главное - будет ли это работать.

[CityCat4]

Shenter,

80 видеокарт стоимостью 200 тысяч,

Те, у кого есть такие деньги здесь не тусят :) Они тупо нанимают ингетраторов, которые все привезут, все поставят, все настроят и еще на время запуска приставят девочку, которая будет подавать кофе в постель
Технология по сути одна - проброс видеокарты в виртуалку, где винда видит видеокарту и работает с ней. Сеть будет узким местом в обеих случаях
- вариант 1 - "честный". Нужное количество GRID в серверах, ESXi, по виртуалке на юзера, в виртуалки пробрасываются ресурсы GRID, которые раздает ESXi - на нее нужно будет поставить дрова (а может и не надо - попробовать-то было не на чем :D )
- ваирант 2 - "хакерский". Число серверов из расчета "одна видеокарта на одно рыло" - то есть заметно больше. KVM/Proxmox и проброс видеокарт в виртуалки. Как? Здесь есть весьма грамотный чувак Денис _______________ - у него получилось, но там все весьма непросто (у меня в свое время не получилось)

То есть будет в любом случае от пяти до двадцати серваков. Им нужно место, охлаждение, елестричество, упсы, бэкапы, зип, обслуживание (это все конечно же, если будет бизнес и он должен быть непрерывным)

[Gregory]

можно проверить, взять комп с видеокартой и на него это всё установить
вот отличная статья от Денис _______________ https://habr.com/ru/post/437598/
зы. даже самому захотелось:)

[Денис _______________]

Shenter,
Собственно вот мой ПК с простыми тестами ( первый тест жесткого это файл на ssd, второй тест это тест проброшенного hdd wd red 4tb), а так же игра в wows на максимальных настройках в 2к разрешении (обращаю внимание, что проброшено 8 потоков из 12 на процессоре).
https://www.youtube.com/watch?v=wjlmWHJiEug

Дело в том, что если делать подключение к ПК по сети, то мы упираемся в видеопоток, потому что чем выше разрешение и битрейт, тем хуже это тянет сеть, тот же RDP тому пример, да и с Nvidia now не все так однозначно... Гораздо лучше делать из 1го ПК 2-4 игровые машины (по числу слотов под ВК поддерживаемых материнкой), да это linux+kvm+qemu или proxmox, что те же яица, только удобнее и фишек больше.

Из плюсов - нет задержек, т.к. мы снимаем напрямую с ВК картинку, а не гоняем ее через сеть, да и к/м подключены напрямую к ПК, а не гоняем управляющий сигнал через ту же сеть, экономим на комплектующих

Из минусов - подбор железа и настройки софта не однозначны, звук - только внешняя USB звуковуха с покупкой отдельного pci-e x1 USB контроллера с последующим физическим пробросом в ВМ, или звуковая плата в слот pci-e x1, мать подойдет не всякая, да и скорости на pci-e портах не факт что будут максимальны, т.к. не остается резервных pci линий.

собственно мой гайд
https://habr.com/ru/post/437598/

[Денис _______________]

CityCat4, мне на тытрубе написал под видео француз, который заставил работать ВК без аргументов, для этого, с его слов, надо принудительно заставить через биос хост грузиться с интегрированной ВК и дополнительно модифицировать еще один файл, чего я не делал в своем гайде... и все заведется... приеду домой из коммандировки буду тестировать

We don't need these arguments anymore. In fact I think the key is to force the server to boot with the IGPU (in the bios) and to exclude the Nvidia GPU in the /etc/modprobe.d/nvidia.conf file with the following lines:

echo "softdep nouveau pre: vfio-pci" >> /etc/modprobe.d/nvidia.conf
echo "softdep nvidia pre: vfio-pci" >> /etc/modprobe.d/nvidia.conf
echo "softdep nvidia* pre: vfio-pci" >> /etc/modprobe.d/nvidia.conf

So I have my Windows and Linux VMs booting with the Nvidia GPU in Q35/OVMF

And very very important, don't forget to put in the bios the video mode on "IGPU" to force the host system not to use the Nvidia GPU. If this is not done, error 43 guarantee!

https://www.youtube.com/watch?v=zIMZrwF60qM

[CityCat4]

Денис _______________, Хм, похоже француз правду говорит :) Я как-то не подумал об этом. Правда, сейчас мне особо бодаться неохота - я переехал на другое место, тут тачка стоит неудобно (и вообще она другая), и дома особо времени бодаться нет, но я буду непременно это иметь в виду, если вдруг выпадет возможность протестить. Самая идея офигительная, я давно хотел сидеть в линухе, но иметь полноценную игровую виртуалку с виндой.

[Денис _______________]

CityCat4, Я вчера протестировал, действительно работает без моего решения в виде дополнительной строки с аргументами, которые есть в моем гайде, так что теперь появился второй вариант для проброса карточек Nvidia

[CityCat4]

Денис _______________, Чуваааак, ну вот зачем ты это сказал? :) Мне же сейчас захочется как-нибудь проверить :) тем более я в отпуске :)

[Денис _______________]

CityCat4, Ну так что мешает?

[CityCat4]

Денис _______________, Тот факт, что я ленивая жопа :D

Answer 2

[Армянское Радио]

Дешевле все игры поставить на эти 40-80ПК. Потому что вам понадобится 40-80 видеокарт ( или ), и 10-20 очень дорогих серверов, чтобы в них все это воткнуть.

Comments

[Shenter]

вам понадобится 40-80 видеокарт

Это приемлимый вариант. Вопрос в технологии, которая позволит эти видеокарты "прокинуть" на клиентские машины без задержек.

[Армянское Радио]

Shenter, Задержка будет не меньше 10 миллисекунд, ровно столько времени нужно на то, чтобы закодировать один кадр HD 1920x1080. Плюс задержка сети, от 0.5 миллисекунд для локальной сети и до 150 миллисекунд для интернета.

При лаге более 30 миллисекунд все станет неиграбельным.

[Shenter]

Армянское Радио, предположительно все будет в пределах одной сети, все устройства будут подключены к одному коммутатору.

При лаге более 30 миллисекунд все станет неиграбельным.

Все дело в том, что есть сервисы для игр через интернет, мне нужно аргументировать, почему игры в локальной сети будут медленнее, чем через интернет

[Армянское Радио]

Shenter, игры в локальной сети не будут медленнее игр через интернет.

[Gregory]

1.у nvidia есть чтото схожее https://www.nvidia.com/ru-ru/geforce-now/ .
playkey и loudplay похоже используют эту же технологию возможно она вам подойдёт.

2.но повторюсь в вашем случае нужен сервер терминалов или чтото иное со своей клиент-серверной платформой

[Gregory]

https://habr.com/ru/company/playkey/blog/400311/ вот тут описано как всё сложно:)

Answer 3

[Gregory]

наймите этого разработчика на работу:)
blog.x-row.net/?p=2455

через RDP не пробовали?
https://habr.com/ru/post/341736/

также посмотрите https://www.nomachine.com/

тут огромное количество минусов, такие как:
вам понадобится сервер терминалов - цена лицензии
отрисовка разных приложений, возможно не все игры это поддерживают
очееньприочень мощный сервер

Comments

[Gregory]

как вариант для выкрутасов напильник+напильник (теория):
1.qemu + vga pass(linux) + windows 10(гость) + brynhildr remote desktop
2.qemu + vga pass(linux) + windows 10(гость) + Looking Glass

каждому пользователю отдельную win10 + 1 видеокарта.

Answer 4

[Евгений Батькович]

у меня нормально стримит через steam на мобилу даже через openvpn. есть еще клиент для nvidia опенсорс, через него тоже неплохой стрим. Но придется как то решать вопрос с кучей видеокарт или их виртуализацией. На каждую виртуалку можно прокинуть видяху как выделенную и получить полную производительность. Компьютерный зал получится облачный, хочешь играй в зале, хочешь с телефона или дохлого ноута.