Definición e implementación de un vocabulario de signos para la interacción con distintos dispositivos

Igea Bruch, Sergio
Sagüés Blázquiz, Carlos (dir.)

Universidad de Zaragoza, EINA, 2014
Departamento de Informática e Ingeniería de Sistemas, Área de Ingeniería de Sistemas y Automática

Graduado en Ingeniería Informática

Resumen: En los últimos años han aparecido nuevas técnicas de interacción con dispositivos electrónicos, como el control por voz, o el movimiento de nuestro cuerpo capturado por sensores. El control a través del movimiento del cuerpo se ha utilizado especialmente en el ámbito del ocio, en videoconsolas, concretamente Kinect o ASUS Xtion, pero se ha desarrollado poco en el ámbito domótico. Con el fin de aplicar esta nueva forma de interactuar en el ámbito domótico, en este trabajo se ha estudiado el sensor de características similares a Kinect, Leap Motion y las posibilidades que ofrece. Inicialmente, con el propósito de comprender la técnica de visión que es utilizada por Leap Motion para la obtención de los datos de profundidad, se han analizado y procesado los datos en crudo que son capturados por el sensor. Estos datos consisten en las dos imágenes capturadas por las cámaras del sensor únicamente, que se asemejan a la visión estero, utilizadas para construir el mapa de profundidad. Una vez realizada esta identificación, se ha desarrollado un identificador gestual utilizando las imágenes obtenidas. Después de entender el funcionamiento, se ha procedido a la definición de un vocabulario de gestos, a partir de la información capturada por Leap Motion utilizando sus propias librerías. Definido el vocabulario, se ha realizado un estudio de la precision y el recall de cada gesto en los diferentes modos de funcionamiento del Leap. Además se ha analizado su variación con el cambio de alguna condición externa, como por ejemplo diferentes alturas de realización del gesto. Se ha concluido que de los cuatro modos de funcionamiento del sensor el mejor modo es el modo equilibrado, pero siendo el modo robusto el menos sensible al cambio de altura. Finalmente, con el fin de evaluar una aplicación que utilice el Leap Motion, se ha realizado la implementación del vocabulario definido para controlar una placa de inducción. Se ha realizado un estudio para identificar cuáles son los mejores gestos para este propósito. Una vez identificados se ha implementado de dicha aplicación.

Palabra(s) clave (del autor): leap motion ; control gestual ; visión 3d

Tipo de Trabajo Académico: Trabajo Fin de Grado