Можно. Конкретика зависит от текущей конфигурации и расположения файлов NGINX. Для удобства редактирования конфигов, если на WIN, можно использовать Bitvise SSH Client и в его браузере файлов найти нужный конфиг и отредактировать в своем локальном редакторе.
genrich_pauls, ну вот этот самый /etc/nginx/nginx.conf и смотрите для начала. В нем будут другие включения дополнительных конфигов, выберите нужный и отредактируйте.