Для начала:
1. Включить кэш сессий
https://nginx.org/ru/docs/http/ngx_http_ssl_module...
2. Включить http2
https://nginx.org/ru/docs/http/ngx_http_v2_module.html
А нагружает процессор что: nginx или uwsgi? SSL на стороне uwsgi включён (бывает и такое :)?