Meta a créé TRIBE v2 — un modèle pour prédire l'activité cérébrale lors du visionnage de vidéos

Meta a présenté TRIBE v2 — un modèle prédictif qui simule comment le cerveau humain traite la vidéo et l'audio. Le système s'entraîne sur des observations directes de l'activité neuronale et peut prédire la réaction du cerveau à n'importe quel contenu vidéo.

Comment Fonctionne TRIBE v2

TRIBE v2 s'entraîne sur des données d'imagerie IRM fonctionnelle (fMRI) et d'autres méthodes d'enregistrement de l'activité cérébrale. Lorsque des vidéos sont montrées aux participants ou que des sons sont reproduits, le modèle apprend à prédire quels neurones et quelles régions du cerveau s'activent en réponse. La principale différence par rapport à la première version est que TRIBE v2 est multimodal : il traite simultanément la vidéo, l'audio et leur interaction, tout comme le fait le cerveau humain.

Le modèle prédit l'activité des niveaux bas (cortex visuel primaire) aux niveaux abstraits élevés de la compréhension sémantique. En d'autres termes, TRIBE v2 capture non seulement si le cerveau voit les contours des objets, mais s'il comprend ce qui se passe à l'écran.

Applications Pratiques

Les chercheurs appliquent déjà TRIBE v2 dans plusieurs directions :

• Neurobiologie — étude de la coordination entre différentes régions du cerveau lors de la perception d'informations complexes
• Design d'intelligence artificielle — emprunter des idées au cerveau pour améliorer la vision et l'audition par ordinateur
• Diagnostic médical — détection des troubles auditifs et visuels, étude des conséquences de l'accident vasculaire cérébral
• Interfaces cerveau-ordinateur — développement de systèmes BCI pour les personnes atteintes de paralysie ou de cécité

Pourquoi C'est Important

Avant TRIBE v2, la neurobiologie et l'intelligence artificielle se développaient presque en parallèle, se croisant rarement. Ce modèle crée un pont entre deux domaines : il montre quels principes de traitement de l'information le cerveau réel considère comme efficaces. Les chercheurs peuvent maintenant observer comment TRIBE v2 fonctionne et emprunter des idées pour leurs réseaux de neurones.

Ce Que Cela Signifie

TRIBE v2 ouvre une nouvelle direction — l'IA inspirée par les neurosciences qui apprend non seulement à copier la structure du cerveau, mais à partir de son fonctionnement réel. Cela pourrait conduire à la fois à des améliorations de la vision par ordinateur et à la compréhension des mécanismes fondamentaux de la conscience.

*Meta est reconnue comme une organisation extrémiste et est interdite dans la Fédération de Russie.