Google DeepMind : le tuteur IA Gemini a offert 1,5 an de progression en 8 semaines à des élèves de Sierra Leone

Google DeepMind, avec Fab AI et le ministère de l'Éducation de la Sierra Leone, a mené à son terme un essai contrôlé randomisé (RCT) à grande échelle : 1 763 élèves du secondaire ont étudié les mathématiques pendant huit semaines avec Guided Learning dans Gemini. L'essai s'inscrit dans le programme mondial de DeepMind visant à mesurer l'impact réel de l'IA sur l'apprentissage.

Comment l'expérience a été conçue

L'étude a porté sur 12 écoles du district de Port Loko. La participation du ministère de l'Éducation a donné accès à de vraies classes et un soutien officiel au niveau des politiques publiques. L'étude a été enregistrée à l'avance (pre-registered), ce qui en fait l'une des plus rigoureuses du secteur de l'EdTech.

Les élèves ne se contentaient pas de demander des réponses à Gemini : la fonction Guided Learning est spécialement réglée pour les pousser à réfléchir par eux-mêmes. Cette approche s'appuie sur des années de recherche du programme LearnLM.

L'analyse de plus de 113 000 conversations a montré que :

• Dans 91,4 % des conversations, les élèves ont utilisé Gemini pour comprendre des concepts, et non pour obtenir des réponses toutes faites
• Dans 76 % de ses messages, Gemini répondait par des questions de clarification, une approche « socratique »
• L'IA n'a donné de solutions toutes faites que dans 2 % des cas
• Principe clé de conception : la charge cognitive reste à l'élève et n'est pas prise en charge par l'IA

Les résultats en chiffres

Les élèves ayant utilisé Guided Learning ont affiché un gain de +0,258 écart-type en mathématiques par rapport au groupe témoin. Concrètement, cela représente de 1,2 à 1,7 année scolaire de progression en huit semaines.

Dans les classes où les enseignants ont intégré Gemini à environ la moitié des cours (l'objectif était de 12 heures sur la période), le résultat était encore meilleur : de 1,8 à 2,5 années scolaires.

Par ailleurs, 69 % des élèves ont atteint ou dépassé les objectifs d'utilisation. Le contraste est net avec le « problème des cinq pour cent » : la part d'utilisateurs qui continuent d'ordinaire à se servir volontairement des outils edtech. Dans cette étude, la barrière a été franchie plus de dix fois.

Avec le temps, les échanges des élèves avec Gemini se sont davantage recentrés sur l'apprentissage : ils cherchaient moins souvent des indices et posaient plus souvent des questions conceptuelles.

« Nous devons étudier rigoureusement les résultats de nos innovations.

Je me réjouis que nous disposions désormais de preuves solides : une IA soigneusement conçue peut améliorer les résultats scolaires en soutien de nos enseignants », a déclaré Conrad Sackey, ministre de l'Éducation de base et secondaire de la Sierra Leone.

Le rôle des enseignants

L'expérience a été conçue comme un partenariat, et non comme un remplacement. Les enseignants ont conçu les cours, fixé les objectifs et animé les discussions en classe. Gemini jouait le rôle de tuteur personnel pour chaque binôme d'élèves, pendant que l'enseignant circulait dans la classe et aidait ceux qui étaient bloqués.

Dans les groupes de discussion, les enseignants ont indiqué que l'outil avait aussi influencé leur propre préparation : en utilisant Gemini pour élaborer leurs cours, ils ont découvert de nouvelles façons d'expliquer des sujets connus de longue date, comme les fractions. Beaucoup ont décrit une transformation de leur rôle : de « conférenciers », ils sont devenus des « facilitateurs ».

DeepMind et Fab AI publient un guide méthodologique avec des protocoles pour d'autres écoles.

Ce que cela signifie

Il s'agit de l'une des premières études randomisées à grande échelle sur l'IA générative dans l'éducation au Sud global. Elle indique qu'un tuteur IA bien conçu ne remplace pas les enseignants et n'ouvre pas la porte à la triche. Il renforce ce que les enseignants font déjà et aide les élèves à réfléchir par eux-mêmes.

Pour l'industrie de l'EdTech, c'est un argument en faveur d'une conception « socratique » : poser des questions plutôt que donner des réponses.