Возможно ли прокинуть SATA контроллер находящийся в одной IOMMU группе с устройствами на материнской плате?

Question

[mxr]

На текущий момент, при попытке сделать это я теряю связь с Proxmox до следующей перезагрузки.

В одной группе с контроллером от marvell(по pci x1), находятся устройства материнской платы (ethernet, местный sata контроллер, usb хаб). На сколько я понимаю, я не могу повлиять на это создав отдельную группу ибо это аппаратное ограничение(буду рад быть не правым).

Answer 1

[hint000]

Здесь пишут про патч ядра:
https://www.reddit.com/r/kvm/comments/kxx4p5/stora...

Please ensure all devices within the iommu_group are bound to their vfio bus driver.

You have to pass every device in the group through at once, which isn't going to work for you. The only way to avoid that is to enable the ACS Override kernel patch to split up the group (by pretending the devices can be safely isolated from each other, even though they can't be)

А вообще неудачная мысль прокидывать SATA-контроллер в виртуальную машину. Так не делают. Прокидывайте диск.

Comments

[mxr]

А вообще неудачная мысль прокидывать SATA-контроллер в виртуальную машину. Так не делают. Прокидывайте диск.

Я делаю, у меня не один контроллер. HPEый HBA прокинут так, и отлично работает.
Плюсов в такой реализации хватает, на виртуальной машине я как минимум получаю полноценный диск и доступ к контроллеру, а не QEMU устройство как с pass through диска отдельно. Но вот контроллер на PCI x1 2.0 (единственный свободный слот) прокидываться так не захотел, и отображается в группе с системными контроллерами(видимо на чипсете).
Горяча замена так же работает лучше, если прокидывать контроллер, а не диск.
ACS кстати как и OIMMU включен, а вот способ с vfio говорят не стабилен хотя я и не разбирался как его запустить.
100% должны быть настройки в BIOS на эту тему по мимо ACS, коих много но пока не нашел то что нужно (desktop b450 prime от asus).

[Drno]

mxr, странное решение. Контроллерами должен управлять хост, не виртуалка. В виртуалку ток диски целиком имеет смысл прокидывать

[Денис _______________]

mxr,
прокинуть сможете, но в момент проброса хост потеряет оборудование из всей iommu группы до следующей перезагрузки хоста и старта этой виртуалки. Тут или патчить ядро, лично я не разобрался как, либо через pci-passthrough пробрасыватьвнешний sata/sas raid-контролер для pcie порта, либо nvme- диск

[mxr]

Drno, Как минимум, для NAS в Proxmox удобно иметь доступ к контроллеру и всем данным связанным с накопителями в SMART.
NAS который я собрал будет иметь виртуальные машины, использующие сетевое хранилище. А само хранилище, полноценный RAID массив в одной из виртуалок(NAS), который вмести с контроллером и дисками полностью управляется через ОС гостя.

[Drno]

mxr, NAS и гипервизоры крайне не рекомендуется разворачивать на виртуалках... разве что для теста какого то

[mxr]

Drno, гипервизоры я понимаю почему. NAS не вижу значимой разницы, но и не хочу в массив добавлять QEMU устройства.
По этому мне и нужен весь контроллер, но похоже что лучше всего было бы заменить материнку, добавив слотов PCIE. Или поставить расширительную карту, разделающую 1 pcie x16 на 2 по x8
Тогда устройства были бы в своих группах, а не висели на чипсете в случае с подключением к PCI x1