Mira Murati développe des modèles d'IA qui interagissent en temps réel et simultanément

Mira Murati, ancienne directrice technique d'OpenAI, a fondé Thinking Machines et dévoile un nouveau paradigme d'interaction avec l'IA. L'entreprise travaille sur les interaction models : des modèles qui perçoivent l'audio, la vidéo et le texte simultanément et répondent en temps réel, en imitant la collaboration naturelle entre humains.

Un nouveau paradigme d'interaction

Les interaction models ne sont pas de simples nouvelles versions de modèles de langage. Ils reposent sur une approche radicalement différente de la façon dont les humains interagissent avec l'IA. Au lieu de rédiger une requête et d'attendre la réponse, l'utilisateur peut parler, montrer son écran, changer de contexte, tandis que le modèle réagit en parallèle, comme un interlocuteur dans une conversation naturelle.

Selon Thinking Machines, les modèles actuels perçoivent la réalité « en un seul flux ». Tant que l'utilisateur parle ou écrit, le modèle reste passif : il ne voit rien, n'entend rien et ne comprend pas ce qui se passe. Le traitement ne démarre qu'une fois l'information entièrement reçue. Cela crée de la latence et rend le dialogue artificiel.

Les interaction models doivent fonctionner autrement : recevoir en continu le flux entrant, réfléchir en parallèle de l'utilisateur et réagir en temps réel. C'est plus proche de la façon dont les humains parlent, les deux interlocuteurs écoutant, traitant l'information et répondant en même temps.

Ce qui change

Le passage d'une interaction séquentielle à une interaction parallèle a des conséquences importantes :

• Naturel : le dialogue avec l'IA deviendra aussi fluide qu'une conversation avec une personne
• Contexte : le modèle perçoit le ton de la voix, le langage corporel et le contexte visuel, pas seulement les mots
• Rapidité : aucun délai entre la pensée de l'utilisateur et la réaction du modèle
• Multitâche : le modèle peut écouter, regarder, analyser et répondre en même temps
• Adaptabilité : le système peut remarquer que l'utilisateur est perdu et l'aider aussitôt

Historique et portée

Mira Murati a quitté OpenAI en septembre 2024. En quelques mois, elle a constitué une équipe et lancé Thinking Machines avec un objectif précis : redéfinir ce que signifie « collaborer avec l'IA ». Pour elle, ce n'est pas une start-up de plus, mais une tentative de résoudre un problème fondamental des interfaces d'IA actuelles.

Si Thinking Machines parvient à concrétiser cette idée, cela pourrait changer la façon dont les gens travaillent avec l'IA dans tous les domaines, du travail professionnel aux études et à la création.

Ce que cela signifie

Les interaction models constituent la prochaine étape de l'évolution de l'interaction avec l'IA. Si les modèles actuels sont des chatbots, les interaction models s'apparentent presque à un dialogue en direct.

Pour les utilisateurs, cela promet une communication plus naturelle avec l'IA. Pour les entreprises, la possibilité de créer des interfaces que les gens n'ont pas besoin d'apprendre à utiliser avec des syntaxes et des commandes spécifiques.