Тормозов не будет.
PS.
Во времена Hyper-V на базе WinServ2008R2 у меня иногда наблюдался глюк у ВМ с линуксом, если включена динамическая память: в какой-то момент kswapd0 сжирал 100% cpu.
На просторах инета я видел только объяснение для memory ballooning в Xen. Но у себя я это наблюдал на Hyper-V и RHEL (либо 6, либо 5) в роли гостя.
Про сейчас ничего не скажу, ибо уже 2012R2, и более новые ядра и только предвыделенный объем памяти.