Перейди в настройки рендера. В Cycles стекло автоматически как надо работает, но не было бы этого вопроса тогда, а значит ты в Eevee. Далее Screen Space Reflections. Включай!
Там будет Refraction. Тоже включай!
Затем переходи в настройки материала объекта. Спускаясь, увидишь Settings, а там - Blend Mode. Установи на Alpha Blend или на Alpha Hashed.
По идее, готово.