Всем спасибо. Все получилось. Просто намудрил в файлах конфигураций Nginx.
На самом деле просто нужно делать новую конфигурацию Nginx для каждого домена и прописывать в ней то что нужно для проекта. Официальная конфигурация на сайте Nuxt полностью рабочая, если конечно не перемудрить самому)