Если у него есть ваш пароль и shell:
1. Если у Вас есть sudo
2. Если у Вас есть любые исполняемые файлы которые вы можете править от своего юзера и у них стоит suid-бит
3. Если например установелнный на машине fpm работает от рута и исполяет файлы из вашего home.
Да масса способов. вопрос о времени поиска дыры.
Если шела нет, его можно получить (например если у вас стоит sshd, то по паролю он пустит).
Так же доступ к вашему аккаунту скорее всего есть через pam, а значит proftpd,sshd,и все что угодно что смотрит в сеть