Наименование корзины хранится в HKCU\SOFTWARE\Microsoft\Windows\CurrentVersion\Explorer\CLSID\{645FF040-5081-101B-9F08-00AA002F954E}.
Чтобы запретить изменение наименования, нужно изменить разрешения на этот раздел. По умолчанию юзер наследует на него полный доступ. Надо отключить наследование, а затем для юзера сменить его на "Только чтение".
Побочным эффектом будет утрата возможности изменения иконок пустой/полной корзины. Впрочем, на подраздел с этими ключами (DefaultIcon) можно отдельно дать юзеру полные права. И даже лучше это сделать - иначе попытка смены десктопной темы может свалиться по ошибке (не пробовал).