Как можно пробросить NVMe-диск в KVM, чтобы его ВМ видела как блочное устройство и быстро с ним работала?

Question

[Максим Гришин]

Есть гипервизор KVM (по факту, Nutanix CE AHV v.20180501, qemu-kvm --version выдает QEMU emulator version 2.6.0 (qemu-kvm-2.6.0-30.20180425.1.45968.el7)), в котором есть ВМ с проброшенными дисками SATA, SAS, SSD, you name it, и в неё нужно пробросить диск NVMe, смонтированный в металле на PCI Express, но строго как диск, а не как PCI-устройство. Я в конфиге написал вот такой кусок:

<disk type='block' device='disk'>
      <driver name='qemu' type='raw' cache='none' io='native'/>
      <source dev='/dev/nvme0n1'/>
      <target dev='sdf' bus='scsi'/>
    </disk>

Проблема: NVMe теряет производительность при таком пробросе, упираясь в эмулированный SATA/SAS-контроллер. Какие ещё есть варианты для проброса устройства как диск? Желательно, чтобы overhead от гипервизора был минимальным. Интересует, какую шину можно использовать, и что нужно сделать с ВМ, чтобы её мочь использовать.

Answer 1

[Radjah]

Тебе по идее надо в сторону iommu копать.

Comments

[Максим Гришин]

Не понимаю, чем эта штука поможет. Проблема в том, что Nutanix CE - бандл и не обновляется как нормальный линукс, причем это ПО стоит и в ВМ, которую нужно настраивать, и в гипервизоре.

[Radjah]

Пробрасывать в виртуалку надо не блочное устройство из хостовой системы, а PCI-устройство. Таким же образом, как видеокарты пробрасывают в виртуалку.

https://ru.wikipedia.org/wiki/IOMMU

[Максим Гришин]

Павел, не могу, плин, в этом случае ВМ не видит файлов на нем, залитых при предустановке софта. Хочу, правда, в самом деле, но для этого ет софт ломать придется, а это чревато потерей полезной нагрузки в самый неожиданный момент.