VitalyDmi, так найдите у вас шаблон страницы, где выводится эта ссылка на админку, и удалите её из шаблона.
Но от того, что скроете на странице какой-то элемент, с сервера он не исчезнет и любой желающий точно также сможет войти в вашу админку. Тут не ссылку на админку скрывать надо, а защитить админку, к примеру, двухфакторной аутентификацией.