В общем, попробовал практически все плагины по поиску "FTP", остановился на варианте
Remote FS. Он конечно достаточно своеобразно настраивается через Рабочие области и общие настройки, но работает неплохо.
И все же, было бы здорово, если бы кто-то форкнул
remote-ftp под VSCode.