да.
Попробуйте закомментировать строку AllowUsers, перезапустите sshd и попробуйте подключиться.
Так можно будет проверить, действительно ли проблема в AllowUsers.
Если при закоментированной строке будет то же самое, значит проблема в чём-то другом.
И посмотрите логи, может быть там есть подробности.
/var/log/auth.log
/var/log/syslog