Иксы на центосе, да и вообще gui в любом unix-like кушают ресурсы. + на старых версиях всегда есть уязвимости, а gui - лишний вектор атак.
Для системного подхода стоит придерживаться принципа Бритвы Оккама и не плодить лишние сущности. Так и GUI необходим для десктопа, а для сервера только cli, только хардкор :)
P.S. тем более администрирование 99.9% удалённое, можно конечно пробросить gui через ssh, но опять же зачем?
P.P.S. Вы быстро привыкните и будете в скором времени удивляться своему вопросу, потому что консоль - мощное, удобное и главное быстрое средство