Странно что об этом нигде практически не написано, но я нашел следующее решение:
apt-get install python3-pyqt5.qtwebengine
apt-get install python3-pyqt5.qtwebkit
Далее если вы используете headless, то указываем, иначе PyQT будет выбивать ошибку:
export QT_QPA_PLATFORM=offscreen 