От apache нужно избавляться - факт. Только память зазря жрет при уже имеющемся nginx.
А про общую оптимизацию есть масса статей:
https://habrahabr.ru/post/132817/
https://habrahabr.ru/post/57346/
https://www.google.ru/search?q=wordpress%20оптимизация 