Ну с появлением автозагрузки я думаю это мелочи)) Подключаются только нужные классы, с которыми вы работаете. А вообще советую посмотреть на Silex https://github.com/silexphp/Silex Он полностью на Symfony компонентах и при этом достаточно шустрый :)
Если нужен роутер без излишеств - FastRoute.
Самый лучший роутер из всех существующих, от одного из core разработчиков PHP - Никиты Попова. Запись из блога, поясняющая молниеносность данного решения.