Picasso dans la poche : comment Doubao rebat les cartes dans les musées

ByteDance a fait de Doubao, son IA phare, le guide officiel du Musée d'art de Shanghai (MAP). L'application, qui compte plus de 100 millions d'utilisateurs actifs par jour (DAU), ne se contente plus de générer du texte : elle mène des visites complètes des expositions Picasso et Louvre. Grâce au modèle multimodal Seed1.8, le service reconnaît les œuvres en temps réel via la caméra du smartphone, en tenant compte de l'éclairage et du contexte. C'est la première fois qu'une IA remplace officiellement les audioguides traditionnels dans un projet de cette ampleur. Pour ByteDance, il ne s'agit pas seulement d'un coup d'image, mais d'un moyen de rendre l'art élitiste accessible au grand public grâce à une interface « empathique ».

Traité par IA depuis 36Kr (36氪) ; édité par Hamidun News
Picasso dans la poche : comment Doubao rebat les cartes dans les musées
Source : 36Kr (36氪). Collage: Hamidun News.
Écouter l'article

Au Musée d'art de Shanghai, à Pudong, le bruit est inhabituel en ce moment, mais il ne vient pas de groupes de touristes. Les visiteurs restent figés devant les chefs-d'œuvre de Picasso, smartphone braqué sur eux, et mènent un dialogue à voix basse. À l'autre bout : Doubao, le principal actif d'IA de l'empire ByteDance. Pendant que les groupes occidentaux peaufinent leurs modèles en laboratoire, le géant chinois de la tech a emmené directement dans les salles des musées un produit qui compte 100 millions d'utilisateurs actifs par jour (DAU). Le projet est devenu le guide numérique officiel de deux grandes expositions : une collection du Louvre et une rétrospective de Pablo Picasso.

Le secteur de l'art avait depuis longtemps besoin d'un électrochoc. Le problème a toujours été le même : le manque d'interprétation de qualité. Les guides professionnels sont rares, leurs services coûtent cher, et les audioguides du siècle dernier n'inspirent que l'ennui avec leur monotonie. ByteDance y a vu la niche idéale pour montrer la puissance de ses algorithmes. L'IA ne se contente plus de sortir une fiche d'une base de données : elle engage un « dialogue empathique » qui aide le spectateur à relier son vécu aux coups de pinceau sur la toile. C'est une tentative de transformer un savoir élitiste en produit numérique accessible à tous.

Le cœur technique de cette transformation est le modèle Seed1.8. Ses développeurs affirment qu'il a atteint l'état de l'art (SOTA, State-of-the-Art) en perception et compréhension des flux vidéo. Contrairement aux anciens systèmes, qui obligeaient à prendre une photo puis à attendre la réponse, Doubao fonctionne en interaction continue. Il comprend ce que vous regardez même si vos mains tremblent et que la lumière de la salle est tamisée. L'IA distingue les différences subtiles entre la céramique iranienne du XVe siècle et la porcelaine chinoise de la dynastie Ming, en s'appuyant sur des nuances visuelles qui échappent souvent à l'œil du non-spécialiste.

Le vice-président de ByteDance, Zhu Jun, souligne qu'interagir avec l'IA, c'est avant tout converser. Au musée, Doubao ne se contente pas de donner une conférence : il pose des questions qui orientent le regard. Par exemple, devant le tableau de Picasso « La Lecture », l'utilisateur peut demander comment se crée l'atmosphère de silence. L'IA ne s'arrêtera pas à la date de création : elle analysera les courbes douces et les blocs de couleur, puis les reliera à la muse de l'artiste, Marie-Thérèse Walter. C'est un niveau d'analyse qui exigeait auparavant, au minimum, un diplôme d'histoire de l'art dans la poche.

Doubao s'était déjà entraîné sur des objets du Musée national de Chine et de sept autres grands sites du pays. Mais le cas du musée de Pudong marque le passage à l'international. ByteDance a optimisé ses algorithmes spécifiquement pour 300 pièces du Louvre et 80 œuvres de Picasso, en tenant compte jusqu'à l'architecture de l'espace d'exposition. Cela crée un précédent : l'IA cesse d'être un simple « moteur de recherche intelligent » pour devenir un véritable intermédiaire entre une culture complexe et le grand public.

Pour l'industrie, le signal est clair. Les modèles multimodaux (LMM) ont définitivement quitté le stade des chatbots et commencent à investir le monde physique. Si l'on demandait hier à l'IA « que cuisiner avec ces ingrédients », on demande désormais « pourquoi cet artiste a choisi précisément ce bleu ». ByteDance parie que, demain, notre principal contact avec le réel passera par une couche d'intelligence artificielle qui expliquera, complétera et interprétera tout ce vers quoi nous pointerons la caméra.

L'essentiel : ByteDance a réussi à transformer un assistant IA en médiateur culturel, en réglant le problème du manque d'experts humains. Sera-ce la fin du métier de guide de musée ou le début d'une nouvelle ère de transmission ?

ZK
Zhemal Khamidun — CPO d'Alpina Digital, product manager d'AlpinaGPT. Conçoit des produits IA depuis 2019. Hamidun News est un projet personnel devenu un agrégateur en production avec plus de 6 000 lecteurs.
✦ Unified AI Workspace · Nomad

Test Frontier LLMs & Autonomous Agents in One Workspace

Run Claude Opus 5.5, GPT-6, Gemini 3.1, and DeepSeek side-by-side in Nomad AI (nomadnet.ai) — unified model routing, deep research, and multimodal workflows under one subscription.

Try Nomad AI →Launch Nomad Agent
Qu'en pensez-vous ?
Chargement des commentaires…