Everything_is_not_so_bad

Графическая оболочка вряд ли имеет отношение к производительности проигрывания видео, а вот процессор и поддержка аппаратного ускорения - прямое.
Было у меня такое давно на Xubuntu (Xfce) и старом компе со старым процессором.

Почитать книги. Допустим, книгу Н. Вирт «Разработка ОС и компилятора. Проект Оберон». Там в том числе описывается создание графической подсистемы ОС Оберон, на языке Оберон, потомке Паскаля.