Investigadores del Instituto de Tecnología de Tokio Tokyo Tech que trabajan en colaboración con colegas de la Universidad Carnegie Mellon, la Universidad de St Andrews y la Universidad de Nueva Gales del Sur han desarrollado un dispositivo de muñeca para la estimación de la postura de la mano en 3D. El sistema consiste ende una cámara que captura imágenes del dorso de la mano y está respaldada por una red neuronal llamada DorsalNet que puede reconocer con precisión los gestos dinámicos.
Ser capaz de rastrear los gestos de las manos es de crucial importancia para el avance de los dispositivos de realidad aumentada AR y realidad virtual VR que ya están comenzando a tener una gran demanda en los sectores médico, deportivo y de entretenimiento. Hasta la fecha, estos dispositivos hanimplica el uso de guantes de datos voluminosos que tienden a obstaculizar el movimiento natural o controladores con un rango limitado de detección.
Ahora, un equipo de investigación dirigido por Hideki Koike en Tokyo Tech ha ideado un sistema de reconocimiento de pose de mano en 3D en la muñeca basado en una cámara que en el futuro podría estar a la par con un reloj inteligente. Su sistema puede permitir de manera importante la captura de movimientos de las manos en dispositivos móvilesconfiguración.
"Este trabajo es el primer estimador de la pose de la mano en 3D en tiempo real basado en la visión que utiliza características visuales de la región dorsal de la mano", dicen los investigadores. El sistema consiste en una cámara apoyada por una red neuronal llamada DorsalNet que puede estimar con precisión 3Dposes de la mano al detectar cambios en el dorso de la mano.
Los investigadores confirmaron que su sistema supera el trabajo anterior con un promedio de un 20% más de precisión en el reconocimiento de gestos dinámicos y logra un 75% de precisión en la detección de once tipos de agarre diferentes.
El trabajo podría impulsar el desarrollo de controladores que admitan la interacción con las manos desnudas. En pruebas preliminares, los investigadores demostraron que sería posible usar su sistema para el control de dispositivos inteligentes, por ejemplo, cambiando la hora en un reloj inteligente simplemente cambiandoángulo del dedo. También demostraron que sería posible usar el sistema como un mouse o teclado virtual, por ejemplo, girando la muñeca para controlar la posición del puntero y usando un teclado simple de 8 teclas para escribir la entrada.
Señalan que se necesitarán más mejoras en el sistema, como el uso de una cámara con una velocidad de fotogramas más alta para capturar el movimiento rápido de la muñeca y poder lidiar con condiciones de iluminación más diversas para el uso en el mundo real.
Fuente de la historia :
Materiales proporcionado por Instituto de Tecnología de Tokio . Nota: el contenido se puede editar por estilo y longitud.
cite esta página :