vreitech

залогиньтесь без ключа и выставьте верных владельца, группу и права:

chown -R $(whoami): ~/.ssh
chmod 0600 ~/.ssh/authorized_keys
chmod 0700 ~/.ssh

затем попробуйте снова.

то, что вы называете "состоят только из цифр, без символов", зовётся либо ASN.1, либо Base32, либо как-нибудь ещё. то, что вы видите, является лишь одним из способов записи ключа в файл, и никак не влияет на сложность разгадывания "пароля". в конечном итоге, всё в компьютере цифры, в том числе и ваши символы. ключ состоит из последовательности бит. для различных алгоритмов шифрования допустимы свои размеры ключей (например, 1024 бита или 4096 бит). по сути именно этим (хотя и не только) определяется сложность "пароля".
кстати, при чём тут пароль, если речь идёт о ключах шифрования?

на ссылку i2p.b64 или onion.