Habla y crea

Escenarios VR en el navegador usando A-frame y Lenguaje Natural

Descripción

Este trabajo investiga la integración de tecnologías innovadoras para el control de entornos de realidad virtual mediante comandos de voz en lenguaje natural. La propuesta combina realidad virtual con modelos de inteligencia artificial capaces de interpretar órdenes verbales y traducirlas en acciones sobre objetos 3D, integrando también manipulación directa tipo drag & drop. Esta interfaz híbrida mejora la accesibilidad y versatilidad de la interacción inmersiva, frente a sistemas tradicionales basados en hardware físico. La solución demuestra ser flexible, escalable y adaptable a diversos contextos, con aplicaciones potenciales en educación, diseño y entornos industriales.

Vídeo demostración

A continuación se muestra un vídeo donde se puede ver el funcionamiento de la aplicación web desarrollada en su versión de escritorio. En este vídeo se comenta brevemente cómo funciona el sistema y se crea una escena compuesta por varios objetos 3D para demostrar las capacidades de la aplicación.

Enlaces relacionados

Pdf image
Memoria del TFG

Documento PDF que recoge la memoria completa del Trabajo de Fin de Grado, detallando el desarrollo del proyecto, tecnologías utilizadas y resultados obtenidos.

Ver Memoria (PDF)
App image
Web del Proyecto

Aplicación Web del proyecto disponible para su uso en navegadores de cualquier dispositivo. Aquí podrás explorar las funcionalidades y características del sistema creando tus propias escenas con la ayuda de Gema, la asistente virtual.

Acceder a la Web del Proyecto
App image
Repositorio del Proyecto

Código fuente y documentación del proyecto disponibles en GitHub. Aquí podrás explorar la estructura del proyecto, así como contribuir y realizar modificaciones si lo deseas.

Acceder al Repositorio del Proyecto