Los dispositivos inteligentes pueden parecer tontos si no entienden dónde están o qué están haciendo las personas que los rodean. Los investigadores de la Universidad Carnegie Mellon dicen que esta conciencia ambiental puede mejorarse mediante métodos complementarios para analizar el sonido y las vibraciones.
"Un orador inteligente sentado en la encimera de una cocina no puede determinar si está en una cocina, y mucho menos saber lo que una persona está haciendo en la cocina", dijo Chris Harrison, profesor asistente en el Instituto de Interacción Humano-Computadora HCII de CMU"Pero si estos dispositivos entendieran lo que sucedía a su alrededor, podrían ser mucho más útiles".
Harrison y sus colegas en el Grupo de Interfaces Futuras informarán hoy en el Simposio de Tecnología y Software de Interfaz de Usuario de la Asociación para la Maquinaria de Computación en Berlín sobre dos enfoques para este problema, uno que utiliza los sensores más ubicuos, el micrófono y otro queemplea una versión moderna de la tecnología de espionaje utilizada por la KGB en la década de 1950.
En el primer caso, los investigadores han tratado de desarrollar un sistema de reconocimiento de actividad basado en sonido, llamado Ubicoustics. Este sistema usaría los micrófonos existentes en parlantes inteligentes, teléfonos inteligentes y relojes inteligentes, permitiéndoles reconocer sonidos asociados con lugares, comodormitorios, cocinas, talleres, entradas y oficinas.
"La idea principal aquí es aprovechar las bibliotecas profesionales de efectos de sonido que se usan típicamente en la industria del entretenimiento", dijo Gierad Laput, un estudiante de doctorado en HCII. "Están limpias, debidamente etiquetadas, bien segmentadas y diversasAdemás, podemos transformarlos y proyectarlos en cientos de variaciones diferentes, creando volúmenes de datos perfectos para entrenar modelos de aprendizaje profundo.
"Este sistema podría implementarse en un dispositivo existente como una actualización de software y funcionar de inmediato", agregó.
El sistema plug-and-play podría funcionar en cualquier entorno. Podría alertar al usuario cuando alguien toca la puerta principal, por ejemplo, o pasar al siguiente paso en una receta cuando detecta una actividad, como ejecutar unalicuadora o picar
Los investigadores, incluidos Karan Ahuja, estudiante de doctorado en HCII, y Mayank Goel, profesor asistente en el Instituto de Investigación de Software, comenzaron con un modelo existente para etiquetar sonidos y lo sintonizaron usando efectos de sonido de las bibliotecas profesionales,como electrodomésticos de cocina, herramientas eléctricas, secadores de pelo, teclados y otros sonidos específicos del contexto. Luego alteraron sintéticamente los sonidos para crear cientos de variaciones.
Laput dijo que reconocer los sonidos y colocarlos en el contexto correcto es un desafío, en parte porque a menudo hay múltiples sonidos presentes que pueden interferir entre sí. En sus pruebas, Ubicoustics tenía una precisión de aproximadamente el 80 por ciento, competitiva con la precisión humana,pero aún no es lo suficientemente bueno como para admitir aplicaciones de usuario. Mejores micrófonos, tasas de muestreo más altas y diferentes arquitecturas de modelos pueden aumentar la precisión con más investigación.
Un video que explica Ubicoustics está disponible: http://www.youtube.com/watch?v=N5ZaBeB07u4
En otro documento, el estudiante de doctorado HCII Yang Zhang, junto con Laput y Harrison, describen lo que llaman Vibrosight, que puede detectar vibraciones en ubicaciones específicas en una habitación usando la vibrometría láser. Es similar a la luzdispositivos que el KGB alguna vez utilizó para detectar vibraciones en superficies reflectantes como ventanas, permitiéndoles escuchar las conversaciones que generaron las vibraciones.
"Lo bueno de la vibración es que es un subproducto de la mayoría de la actividad humana", dijo Zhang. Correr en una cinta de correr, golpear un martillo o escribir en un teclado crea vibraciones que se pueden detectar a distancia ". El otroLo bueno es que las vibraciones se localizan en una superficie ", agregó. A diferencia de los micrófonos, las vibraciones de una actividad no interfieren con las vibraciones de otra. Y a diferencia de los micrófonos y las cámaras, monitorear las vibraciones en lugares específicos hace que esta técnica sea discreta y preserva la privacidad..
Este método requiere un sensor especial, un láser de baja potencia combinado con un espejo orientable motorizado. Los investigadores construyeron su dispositivo experimental por alrededor de $ 80. Etiquetas reflectantes: el mismo material utilizado para hacer que las bicicletas y los peatones sean más visibles por la noche- se aplican a los objetos a monitorear. El sensor se puede montar en una esquina de una habitación y puede monitorear las vibraciones de varios objetos.
Zhang dijo que el sensor puede detectar si un dispositivo está encendido o apagado con un 98 por ciento de precisión e identificar el dispositivo con un 92 por ciento de precisión, en función del perfil de vibración del objeto. También puede detectar movimiento, como el de una silla cuando alguien se sientaen él, y sabe cuándo alguien ha bloqueado la vista del sensor de una etiqueta, como cuando alguien está usando un lavabo o una estación de lavado de ojos.
La Fundación Packard, la Fundación Sloan y Qualcomm apoyaron el trabajo sobre Ubicoustics y Vibrosight, con fondos adicionales de la beca de doctorado de Google para Ubicoustics.
Fuente de la historia :
Materiales proporcionados por Universidad Carnegie Mellon . Nota: El contenido puede ser editado por estilo y longitud.
Cita esta página :