По сути https - https работает через расшифровку и повторную шифровку, т.е. сертификаты должны быть и на nginx. Посмотрите пример любого ssl сервера на nginx.
Как вариант еще, если nginx только для балансировки, использовать haproxy, он умеет балансировку SSL без расшифровки
https://www.haproxy.com/blog/enhanced-ssl-load-bal...