Ну на счёт памяти - его процесс кушает больше, но и процесс один, в отличии от того же PHP-FPM, так что в суме даже меньше может быть.
На счёт производительности - первые запросы могут быть медленными, но после нескольких сотен должно становиться быстрее, это связано с особенностями работы HHVM:
hhvm.com/blog/1817/fastercgi-with-hhvm
Из собственного опыта - в итоге быстрее, но я не Wordpress запускаю.