Live 18/11 · Cohorte 318 nov à 19h00 MSK — atelier pratique gratuit sur les agents IA · La Cohorte 3 démarre le 23/11Atelier 18/11 →Cohorte 3 (23/11)
SortieAnalyse · Sur le radarIEEE Spectrum AI→ original

Des bagues électroniques traduisent la langue des signes en texte grâce à l'IA

Des scientifiques coréens ont mis au point un système de sept bagues électroniques dotées de capteurs de mouvement. Une fois les bagues enfilées et connectées en Bluetooth, l'IA traduit la langue des signes en texte. Les premiers tests affichent 88 % de précision de reconnaissance. Le système reconnaît 100 mots de la langue des signes américaine et 100 mots de la langue des signes internationale, et il a fonctionné avec des personnes absentes de son entraînement. Pour l'instant, il ne traduit que les mouvements des mains. Le prochain grand défi : intégrer les mimiques faciales, les mouvements des lèvres et les constructions spatiales, qui jouent un rôle grammatical dans les langues des signes.

Traité par IA depuis IEEE Spectrum AI ; édité par Hamidun News
Des bagues électroniques traduisent la langue des signes en texte grâce à l'IA
Source : IEEE Spectrum AI. Collage: Hamidun News.
Écouter l'article

Des bagues électroniques dotées de capteurs de mouvement et d'intelligence artificielle peuvent traduire les langues des signes en texte. Des chercheurs de l'université Yonsei sont les premiers à le démontrer.

Pourquoi les tentatives précédentes ont échoué

Pendant des années, les chercheurs ont tenté de créer un système pratique de traduction des langues des signes. Certains ont utilisé des caméras et la vision par ordinateur, mais cela ne fonctionnait qu'en conditions contrôlées et se trompait souvent dès que l'éclairage changeait. D'autres ont mis au point des gants intelligents équipés de capteurs. Mais ces gants accumulaient chaleur et humidité, ce qui les rendait inconfortables, et ne tenaient pas compte des différences individuelles de taille de main et de longueur des doigts. La plupart des capteurs exigeaient une connexion filaire à un ordinateur, ce qui entravait les mouvements des mains. Même les versions sans fil se raccordaient généralement par câble à un émetteur central unique.

Sept bagues plutôt que des gants

Une équipe dirigée par Ki Jun Yu a développé une nouvelle approche : un ensemble de bagues électroniques, chacune transmettant les données de mouvement via Bluetooth Low Energy. Utiliser des bagues plutôt que des gants a permis de placer les capteurs avec souplesse et de tenir compte des différences anatomiques naturelles entre les personnes. La liaison sans fil a donné aux mains une liberté totale.

L'analyse a montré que sept doigts jouent le rôle principal dans la langue des signes ; l'équipe a donc retenu exactement sept bagues. Chacune est équipée d'un accéléromètre qui suit à la fois les postures statiques et les mouvements. C'est essentiel, car les langues des signes combinent positions statiques et transitions dynamiques entre elles.

En cours de développement, le système a buté sur un problème de fiabilité. Les contacts droits en cuivre cassaient sous les flexions répétées. La solution : passer à des contacts à motif sinueux, qui résistent à des milliers de cycles.

L'IA reconnaît les gestes

Les chercheurs ont développé un système d'apprentissage profond qui reconnaît les gestes avec une remarquable polyvalence. Le système a appris à fonctionner non seulement avec les deux personnes du jeu d'entraînement, mais aussi avec cinq personnes totalement nouvelles, sans réglage spécifique pour chacune.

Lors des expériences, le système a reconnu 100 mots de la langue des signes américaine et 100 mots de la langue des signes internationale, avec une précision de 88,3 % et 88,5 % respectivement. C'est un bond considérable : les tentatives précédentes se limitaient à moins de 50 mots de vocabulaire.

Autre point impressionnant : le système a traduit non seulement des mots isolés, mais aussi des phrases entières en traduction continue des signes. C'est exactement ce qu'il faut pour une conversation naturelle en temps réel.

Ce que cela signifie

L'objectif à long terme est d'intégrer le système aux smartphones sans matériel spécial. Les bagues enverraient des signaux à l'appareil mobile, où ils seraient traduits automatiquement en temps réel. La technologie deviendrait ainsi accessible pour la communication quotidienne.

Prochaines étapes : étendre le système à davantage de personnes, ajouter des mots au vocabulaire et prendre en charge la langue des signes coréenne et d'autres variantes régionales. Les chercheurs prévoient aussi de faire passer l'autonomie des 12 heures actuelles à une journée entière.

Une réserve importante : le système actuel ne traduit que les mouvements des mains. Le prochain grand défi consiste à ajouter les mimiques faciales, les mouvements des lèvres et les constructions spatiales, qui sont importants sur le plan grammatical dans les langues des signes.

Dossier

Questions clés sur cet article

Pourquoi les tentatives précédentes ont échoué?

Pendant des années, les chercheurs ont tenté de créer un système pratique de traduction des langues des signes. Certains ont utilisé des caméras et la vision par ordinateur, mais cela ne fonctionnait qu'en conditions contrôlées et se trompait souvent dès que l'éclairage changeait. D'autres ont mis au point des gants intelligents équipés de capteurs.

Que sait-on sur Sept bagues plutôt que des gants ?

Une équipe dirigée par Ki Jun Yu a développé une nouvelle approche : un ensemble de bagues électroniques, chacune transmettant les données de mouvement via Bluetooth Low Energy. Utiliser des bagues plutôt que des gants a permis de placer les capteurs avec souplesse et de tenir compte des différences anatomiques naturelles entre les personnes. La liaison sans fil a donné aux mains une liberté totale.

Que sait-on sur L'IA reconnaît les gestes ?

Les chercheurs ont développé un système d'apprentissage profond qui reconnaît les gestes avec une remarquable polyvalence. Le système a appris à fonctionner non seulement avec les deux personnes du jeu d'entraînement, mais aussi avec cinq personnes totalement nouvelles, sans réglage spécifique pour chacune. Lors des expériences, le système a reconnu 100 mots de la langue des signes américaine et 100 mots de la langue des signes internationale, avec une précision de 88,3 % et 88,5 % respectivement.

ZK
Zhemal Khamidun — CPO d'Alpina Digital, product manager d'AlpinaGPT. Conçoit des produits IA depuis 2019. Hamidun News est un projet personnel devenu un agrégateur en production avec plus de 6 000 lecteurs.
✦ Unified AI Workspace · Nomad

Test Frontier LLMs & Autonomous Agents in One Workspace

Run Claude Opus 5.5, GPT-6, Gemini 3.1, and DeepSeek side-by-side in Nomad AI (nomadnet.ai) — unified model routing, deep research, and multimodal workflows under one subscription.

Try Nomad AI →Launch Nomad Agent
Qu'en pensez-vous ?
Chargement des commentaires…