Я сделал так: в настройках CRM формы включил редирект по ссылке через 1 секунду на предыдущую страницу или на главную.
upd Если сделать редирект на страницу с формой, это будет вводить людей в заблуждение: я отправил или нет:/
Поддержка Б24 мне на такой вопрос ответила: Удалить чат нельзя, можно только скрыть.
Максимум, что я смог сделать выгнать всех из чата и почистить файлы через Диск:
Очистка места, Экспертный режим, Хранилище для Веб-мессенджера
Найти чат и через вызов меню удалить содержимое папки (удаляться только файлы).