Tecnologías de interacción avanzadas aplicadas a videojuegos

Abstract

New technologies allowing new forms of interaction emerged in the last years and have been applied to videogames. From here arises the possibility of integrating these technologies in one interactive experience. In this article are presented the main results in the integration of Unity 3D graphics engine, Microsoft Kinect SDK and NVIDIA 3D Vision, in order to combine head tracking, gesture recognition and stereoscopic vision into a videogame.Keywords: Natural user interface; stereoscopic images 3D; image processing; View-Dependent images; head tracking IntroducciónEn los últimos años, varias tecnologías de interacción relacionadas con el entretenimiento han cobrado relevancia, realizando avances importantes en sus respectivas áreas y convirtiéndose en productos de consumo masivo como Microsoft KinectPor sí solas las nuevas formas de interacción mejoran la experiencia de los usuarios, logrando mayor inmersión e interfaces más amigables. Por ejemplo el dispositivo Microsoft Kinect introduce una nueva forma de interacción de los usuarios, permitiendo el seguimiento de extremidades y tronco de múltiples usuarios, en tiempo real sobre escenarios 3D. Esta información puede ser procesada para hacer viable que el usuario interactúe de forma gestual. Por otro lado NVIDIA 3D Vision hace posible la visualización de imágenes estereoscópicas para dar sensación de profundidad a los usuarios.En este artículo, se describe una propuesta de integración de las tecnologías antes mencionadas aplicadas al campo de videojuegos, con el objetivo de mejorar la interacción e inmersión de los usuarios. Las tecnologías utilizadas permiten realizar el seguimiento de la postura del jugador, el reconocimiento de gestos, el reconocimiento de comandos de voz, la percepción de profundidad por medio de la visualización en tiempo real de imágenes 3D estereoscópicas y la utilización de técnicas que mejoren dicha percepción.Este artículo consta de 5 secciones. En el Estado del arte se brinda un breve resumen que describe las tecnologías utilizadas, en Desarrollo se brinda una breve descripción de los distintos elementos implementados en el prototipo, en Resultados los resultados obtenidos con el prototipo implementado, luego las Conclusiones y por último en la sección Trabajo a futuro los pasos y posibles mejoras a realizar para mejorar los resultados obtenidos. Estado del Arte Reconocimiento de gestosEl objetivo del reconocimiento de gestos es la interpretación de gestos humanos mediante algoritmos matemáticos. Muchos estudios se han realizado utilizando cámaras y algoritmos de visión por computador para lograr interpretar lenguajes de señas [3]. También se han realizado avances en la identificación y reconocimiento de la postura, la marcha y comportamientos humanos [4]. El reconocimiento de gestos permite interactuar directamente con computadoras, sin tener necesidad de utilizar otros dispositivos.El Kinect es un dispositivo de detección de movimientos y captura de audio. Su principal característica es la de realizar el seguimiento corporal de los ...