Anillos electrónicos traducen el lenguaje de señas a texto con AI
Científicos coreanos desarrollaron un sistema de siete anillos electrónicos con sensores de movimiento. Al ponerse los anillos y conectarse por Bluetooth, una p
Los anillos electrónicos equipados con sensores de movimiento e inteligencia artificial pueden traducir lenguas de signos a texto — científicos de la Universidad de Yonsei lo demostraron por primera vez.
Por qué los Intentos Anteriores Fracasaron
Durante muchos años, los investigadores han intentado crear un sistema práctico de traducción de lengua de signos. Algunos utilizaron cámaras y visión por computadora, pero esto solo funcionaba en condiciones controladas y a menudo fallaba cuando cambiaba la iluminación. Otros desarrollaron guantes inteligentes con sensores. Sin embargo, acumulaban calor y humedad, causando incomodidad, y no tenían en cuenta las diferencias individuales en el tamaño de la mano y la longitud de los dedos. La mayoría de los sensores requerían conexión por cable a las computadoras, restringiendo el movimiento de las manos. Incluso las versiones inalámbricas normalmente se conectaban por cable a un único transmisor central.
Siete Anillos en Lugar de Guantes
Científicos liderados por Ki Jun Yu desarrollaron un nuevo enfoque: un conjunto de anillos electrónicos, cada uno transmitiendo información de movimiento a través de Bluetooth Low Energy. Usar anillos en lugar de guantes permitió una colocación flexible de sensores y la consideración de diferencias anatómicas naturales entre personas. La comunicación inalámbrica dio a las manos total libertad.
El análisis reveló que siete dedos juegan el papel principal en la lengua de signos. Por lo tanto, utilizaron exactamente siete anillos. Cada uno está equipado con un acelerómetro que rastrea tanto las posturas estáticas como los movimientos.
Esto es crítico porque las lenguas de signos combinan posiciones estáticas y transiciones dinámicas entre ellas. Durante el desarrollo, el sistema enfrentó un problema de confiabilidad. Los contactos de cobre directo se rompían con flexión frecuente.
Solución: cambiar a contactos con patrón sinuoso que resisten miles de ciclos.
La IA Reconoce Gestos
Los investigadores desarrollaron un sistema de aprendizaje profundo que reconoce gestos con sorprendente universalidad. El sistema aprendió a trabajar no solo con dos personas de la muestra de entrenamiento, sino también con cinco personas completamente nuevas — sin ajuste para cada una. En experimentos, el sistema reconoció 100 palabras del Lenguaje de Signos Americano y 100 palabras del Lenguaje de Signos Internacional con una precisión del 88,3% y 88,5% respectivamente.
Este es un enorme salto adelante: los intentos anteriores se limitaban a menos de 50 palabras en el vocabulario. También es impresionante que el sistema tradujera no solo palabras individuales, sino oraciones completas en traducción continua de gestos. Esto es exactamente lo que se necesita para conversación natural en tiempo real.
Qué Significa Esto
El objetivo a largo plazo es integrar el sistema en smartphones sin equipamiento especializado. Los anillos transmitirían señales a un dispositivo móvil, donde serían traducidas automáticamente en tiempo real. Esto hará que la tecnología sea accesible para la comunicación cotidiana.
Los próximos pasos: expandir el sistema para trabajar con más personas, agregar más palabras al vocabulario, soportar el Lenguaje de Signos Coreano y otras variantes regionales. Los científicos también planean aumentar la duración de la batería de las actuales 12 horas a un día completo. Un punto importante: el sistema actual solo traduce movimientos de las manos.
El próximo gran desafío es agregar expresiones faciales, movimientos de labios y construcciones espaciales que son gramaticalmente importantes en las lenguas de signos.