Técnicas de captura y reproducción de modelos 3D con cámaras RGBD y gafas de realidad virtual

Abstract

Las cámaras RGBD son dispositivos que capturan simultaneamente flujos de color y profundidad que pueden ser usados para las capturas de modelos tridimensionales. Con la información de dos o más de estos dispositivos es posible recrear modelos para su posterior tratado. Por otro lado, la proliferación en el mercado de gafas de realidad virtual y realidad aumentada permite representar e interacturar con escenarios y modelos en 3D. En el anterior contexto, y mediante sensores Kinect v2 y gafas de realidad virtual Oculus Rift, el TFG propone explorar las posibilidades que ofrecen este tipo de dispositivos capturando, en tiempo real, el modelo 3D de elementos en movimiento y reproducirlos con el mínimo delay posible en las Oculus Rift para la interacción de un tercero con ellos. Esta tarea conlleva tanto el tratamiento de los flujos de datos obtenidos de las cámaras para llegar a obtener por cada frame una reproducción del modelo, como la calibración de múltiples Kinect para generar el volumen completo, la creación y aplicación de algoritmos para eliminar los elementos estáticos de la escena y la programación de todo ello para su automatización y facilidad de uso.