Ваш вопрос касается не только Каспера. Антивирусы стоят на страже безопасности компа, поэтому они следят и за собственной безопасностью и мешают тому, кто хочет удалить их "просто так". Обычно для их удаления авторы предусматривают специальные утилиты.
Но есть и универсальный способ - применить внешние (по отношению к ОС) деинсталляторы, способные подчистить за виндовской удалялкой то, что она не смогла вычистить. Перед применением такого деинсталлятора обязательно надо вручную выключить антивирус.
Лично я применяю программу
Your Uninstaller! (именно так, с восклицательным знаком), и не только против антивирусов, а вообще любых программ, и даже компонентов ОС. Помимо деинсталляции, он даёт ещё некоторые бонусы - например, позволяет просмотреть и отредактировать список автозагружаемого софта. Работает он в 3 этапа. Сначала запускает штатную удалялку, затем определяет, что ею не удалено, и представляет вам решать, стОит ли удалить это оставленное (т.е. не прихвачено ли что-то лишнее), и наконец, удаляет это оставленное.
Простой
Средний