Привет,
Конечно можно, более того, уже это во всю делаем.
Я думаю, что понятно, что если у вас интерактивые сценарии для VR, то вам нужен дополнительный сенсор только для трекинга рук (Nimble или какой-нибудь другой).
Также нужно понимать, какого размера комнаты или 3d сцены будут отсканированы заранее. Если одна комната, то это не проблема, но если несколько комнат или целый этаж, то это уже становится проблемотично, но всё равно решаемо, и то и другое, например с помощью того же самого KinectFusion то Microsoft, который поставляется с официальным Kinect SDK v1 & v2, либо с его открытой имплементацией Kinfu, которая является частью PCL.
Кстати, Kintinuous просто видоизменённый KinectFusion (
dspace.mit.edu/bitstream/handle/1721.1/71756/MIT-C... и
18.7.29.232/bitstream/handle/1721.1/73167/MIT-CSAI...), который имплементировали по оригинальной научной работе от Microsoft, очень похожий на Scalable версию KinectFusion (
https://www.youtube.com/watch?v=NsrmniEvO4s).
По поводу Nibmle ничего не могу сказать, т.к. то, что они показывают (маленький новый сенсор, а не используя Kinect или другие сенсоры), до сих пор не продаётся, хотя они и показывают хорощие результаты.
Я делал и делаю такого рода сборки:
1) Leap Motion или Intel RealSense F200 ($100 и тот и другой, правда её нужен крепёж на Oculus).
2) KinectFusion (есть в официальном Kinect SDK для Kinect v1 и Kinect v2) или
Kinfu - открытая имплементация KinectFusion (модуль в PCL).
3) Kinect v1 или v2.
Будут вопросы, предложения, пиши в личку.
