Вот рабочий вариант
RewriteEngine On
RewriteCond %{HTTPS} off
RewriteCond %{HTTP:X-Forwarded-Proto} !https
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R=301]
НО, чтобы все работало необходимо вставить этот код в самый верх файла .htaccess