Не удалять объект, а отключить его отображение (и коллайдер чтоб не встать снова) и запомнив стартовую позицию, по таймеру снова включить его, поместив в стартовые координаты.
Если захотите прям пример кода - то вперед смотреть и читать официальные туториалы от Unity о том как делать базовые вещи.
