Interacción del Cuerpo Humano con Objetos Virtuales

Abstract

En el presente proyecto de investigación se propone una metodología para el desarrollo de un sistema computacional de reconocimiento de los movimientos del cuerpo humano, así como su interacción con objetos virtuales que pueden ser mostrados a través de la pantalla de una computadora o sobre una pared utilizando un proyector de imágenes. Para el reconocimiento del cuerpo humano, el sistema utiliza un Kinect v2.0 de las consolas de videojuegos Xbox ONE de Microsoft, asimismo, emplea técnicas de visión por computadora a través de la librería de código abierto de OpenCV, con la cual se crean los objetos virtuales con los que el usuario puede interactuar. En primera instancia, el sistema desarrollado le permite a un usuario mover los objetos virtuales que se le muestran a través de la pantalla de la computadora al colocar y empuñar la mano sobre uno de ellos. Por otro lado, parte del desarrollo del sistema se realizó con la intención de que pueda ser implementado en los entrenamientos en un gimnasio con muros de escalada, en este caso, el funcionamiento del sistema consiste en validar que un escalador cumpla satisfactoriamente con una ruta de entrenamiento; utilizando un proyector de imágenes se le indica al escalador la ruta de entrenamiento a seguir al mostrar un objeto virtual sobre cada una de las rocas de escalada que necesita sujetar, cuando el escalador sujeta la roca de escalada indicada, el objeto virtual cambia de color, lo cual permite comprobar el desempeño que tuvo el escalador sobre el muro de escalada.