В location / пропишите
try_files $uri $uri/ =404
либо так
location / {
try_files $uri $uri/ /index.php?q=$uri&$args;
}
location "/"
{
index index.php index.html index.htm; # варианты индексных файлов
try_files $uri $uri/ =404; # проверить есть ли файл из запроса на диске, иначе - вернуть ошибку 404
}