А на хосте больше, чем один физический сетевой интерфейс?
Пробросить устройство в гостя можно, но тогда проброшенное перестанет быть доступно на хосте.
Вообще удивительно, для чего вам такая экзотика? Первый раз такую задачу вижу, обычно сеть в KVM настраивается через бридж, реже через NAT.