Live 18/11 · Cohorte 318 nov à 19h00 MSK — atelier pratique gratuit sur les agents IA · La Cohorte 3 démarre le 23/11Atelier 18/11 →Cohorte 3 (23/11)

Luma Dream Machine sait désormais remplacer des personnages dans une vidéo finie et supprimer les éléments superflus

Luma AI a ajouté au générateur vidéo Dream Machine la fonction Character Swap & Insert. Elle retouche une vidéo déjà prête : remplace un personnage ou un objet, ajoute un nouvel élément dans un espace vide du cadre et supprime les silhouettes indésirables. Au lieu de régénérer tout le clip à cause d'un seul détail, on peut ne corriger que celui-ci. La fonction est disponible sur le web et via le plugin Luma MCP.

Traité par IA depuis TG: @cgevent (Метаверсище и ИИще) ; édité par Hamidun News
Luma Dream Machine sait désormais remplacer des personnages dans une vidéo finie et supprimer les éléments superflus
Source : TG: @cgevent (Метаверсище и ИИще). Collage: Hamidun News.
Écouter l'article
Fiche synthèse et chiffres clés
ParamètreDonnées
Source primaireTG: @cgevent (Метаверсище и ИИще) ↗
Rédacteur en chef
Trois modesremplacement (Swap), insertion (Insert) et suppression d'objets
Chiffre clé #2Disponible dans la version web de Dream Machine, sans installation séparée
Chiffre clé #3Via le plugin Luma MCP, elle se pilote depuis un chatbot par une simple commande textuelle

Tous ceux qui ont travaillé avec des générateurs vidéo connaissent la situation : le clip est presque parfait, mais le héros n'est pas le bon, une personne en trop apparaît dans le cadre et il manque un objet sur la table. En général, il n'y a qu'une issue : réécrire le prompt et générer à nouveau, en espérant que les parties réussies ne se désagrègent pas. Luma AI tente de résoudre ce problème avec la fonction Character Swap & Insert dans Dream Machine.

Ce qui a été ajouté exactement

Selon la description, la fonctionnalité travaille sur une vidéo déjà prête, et pas seulement sur une génération à partir de zéro. Il existe trois modes.

Le premier, Swap, remplace un personnage ou un objet de la vidéo par un autre. Le deuxième, Insert, ajoute un nouvel objet dans une zone vide du flux vidéo. Le troisième retire du cadre les silhouettes superflues.

En substance, il s'agit d'une retouche sur un matériau existant, familière pour les photos (remplacer, compléter, effacer), mais appliquée désormais à l'image animée. La tâche est plus difficile qu'il n'y paraît : le nouvel élément doit conserver sa forme, son éclairage et sa position d'une image à l'autre, faute de quoi on obtient une tache tremblotante.

Où l'essayer

La fonction est déjà disponible sur le web, dans Luma Dream Machine, sans rien installer. Elle a en outre été intégrée au plugin officiel Luma MCP. MCP (Model Context Protocol) permet de connecter des outils externes à des chatbots et à des agents ; la retouche vidéo peut donc être lancée par une commande textuelle depuis une conversation, et pas seulement à la souris dans l'interface.

Pour les développeurs et les product managers, c'est la partie la plus intéressante. Si un éditeur vidéo est accessible comme outil MCP, on peut l'intégrer dans une chaîne : l'agent reçoit la vidéo, formule ce qu'il faut remplacer ou supprimer, appelle le plugin et renvoie le résultat à un humain pour validation.

À quoi cela peut servir

Plusieurs scénarios se dessinent clairement :

  • Marketing et publicité. Une même vidéo tournée peut être adaptée à différents marchés en remplaçant le personnage ou le produit à l'image.
  • Post-production. Supprimer un passant fortuit ou un objet superflu est plus simple que de retourner la scène.
  • Prototypage. On peut vérifier rapidement à quoi ressemble une scène avec un autre héros ou d'autres accessoires, sans lancer une nouvelle génération.
  • Automatisation. Le lien avec Luma MCP permet de monter une chaîne de retouches où l'humain se contente d'approuver la version finale.

Ce qu'on ne voit pas encore

L'annonce est très courte et manque de détails importants. On ignore quelles limites s'appliquent à la durée et à la résolution de la vidéo, comment le modèle se comporte lors de mouvements rapides et d'occultations, combien coûte l'opération et si elle est incluse dans les forfaits habituels. Aucune comparaison avec les concurrents n'est fournie non plus. Ce type d'outils est généralement convaincant en démonstration, mais sur des scènes réelles complexes (foule, caméra brusque, petits détails, mains), la qualité peut nettement chuter.

Il est donc trop tôt pour tirer des conclusions tonitruantes. Mieux vaut prendre votre propre matériel type et vérifier trois points : la stabilité du personnage remplacé d'une image à l'autre, la présence d'artefacts à l'emplacement des objets supprimés, et le nombre d'itérations nécessaires pour obtenir un résultat acceptable.

Conclusion pratique

Si vous produisez du contenu vidéo ou un produit basé dessus, la fonction mérite d'être essayée dès maintenant : elle est sur le web, sans installation. Si vous construisez des pipelines d'agents, considérez le plugin Luma MCP comme un bloc prêt à l'emploi pour les retouches vidéo. L'essentiel est de ne pas y reporter une charge de production tant que vous n'avez pas vous-même vérifié la qualité et le coût sur des tâches réelles.

Dossier

Questions clés sur cet article

Que sait-on sur Ce qui a été ajouté exactement ?

Selon la description, la fonctionnalité travaille sur une vidéo déjà prête, et pas seulement sur une génération à partir de zéro. Il existe trois modes. Le premier, Swap, remplace un personnage ou un objet de la vidéo par un autre. Le deuxième, Insert, ajoute un nouvel objet dans une zone vide du flux vidéo. Le troisième retire du cadre les silhouettes superflues.

Que sait-on sur Où l'essayer ?

La fonction est déjà disponible sur le web, dans Luma Dream Machine, sans rien installer. Elle a en outre été intégrée au plugin officiel Luma MCP. MCP (Model Context Protocol) permet de connecter des outils externes à des chatbots et à des agents ; la retouche vidéo peut donc être lancée par une commande textuelle depuis une conversation, et pas seulement à la souris dans l'interface. Pour les développeurs et les product managers, c'est la partie la plus intéressante.

Que sait-on sur à quoi cela peut servir ?

Plusieurs scénarios se dessinent clairement : Marketing et publicité. Une même vidéo tournée peut être adaptée à différents marchés en remplaçant le personnage ou le produit à l'image. Post-production. Supprimer un passant fortuit ou un objet superflu est plus simple que de retourner la scène. Prototypage. On peut vérifier rapidement à quoi ressemble une scène avec un autre héros ou d'autres accessoires, sans lancer une nouvelle génération. Automatisation.

ZK
Zhemal Khamidun — CPO d'Alpina Digital, product manager d'AlpinaGPT. Conçoit des produits IA depuis 2019. Hamidun News est un projet personnel devenu un agrégateur en production avec plus de 6 000 lecteurs.
✦ Hands-On AI Engineering · Hamidun Academy

Build & Ship Production AI Agents Without Boilerplate Code

Start your free 72-hour trial at Hamidun Academy (academy.hamidun.com) — interactive lessons on Claude Code & Cursor, live Tech Radar, and production agent templates.

Start 72h Free Trial →Vibe-Coding Intensive
Qu'en pensez-vous ?
Chargement des commentaires…