Что-то подобное делали на базе Kinect от Microsoft — окно в виде LCD монитора, которое меняет изображение в зависимости от перемещения наблюдателя. Создается полная иллюзия, что окно настоящее.
У вас задача аналогичная, перехватывать взгляд человека, только обрабатывать по другому.
Возможно, вам хватит даже легкого изменения положения головы — а Kinect это отлавливает.
Вот у меня монитор большой — я головой точно кручу=)
Подробнее:
www.rationalcraft.com/Winscape.html
https://www.youtube.com/watch?v=V2hxaijuZ6w
Больше сходу не выгуглил, т.к. window (окно дома) и windows (ОС микрософт) с точки зрения поисковика одно и тоже.
Но инфы в инете должно быть больше, помню, что как то изучал эту тему, хотел у себя такое сделать.