Какие тесты делали, какие плагины используете? Вижу пока EWWW Image Optimizer и WP-Optimize.
И да, зачем использовать CloudFlare на подобном сайте? Могу поспорить, что кэширование и минификация включены и на стороне cloudflare.
Для подобных сайтов он вообще не нужен. И вряд-ли кто-то будет ддосить. Выбрасывайте.