Text-to-cad : un agent d'IA dessine des pièces de robot à partir d'une description, le projet dépasse les 26 000 étoiles
La CAD, logiciel de dessin 3D, est difficile à maîtriser sans pratique. Le mécatronicien Jake Fitzgerald a confié ce travail à Codex et à Claude Code : l'agent écrit un script, construit le modèle, examine une capture d'écran et corrige les erreurs. Le projet open source text-to-cad a récolté environ 26 000 étoiles (marques d'intérêt des développeurs) et un demi-million de téléchargements. Conclusion : l'agent accélère la conception des pièces simples, mais l'export et les cotes doivent être vérifiés séparément.
Traité par IA depuis Habr AI ; édité par Hamidun News
Pour concevoir une pièce de robot, il faut recourir à la CAD, un logiciel de dessin 3D dont la prise en main n'est pas simple. Le mécatronicien Jake Fitzgerald, qui a longtemps développé des logiciels et a oublié la CAD, a confié ce travail aux agents Codex et Claude Code. Ils écrivent du code, celui-ci génère le modèle 3D, puis l'agent examine une capture d'écran et corrige les erreurs.
De cette approche est né le projet open source text-to-cad (« du texte à la CAD ») : environ 26 000 étoiles, c'est-à-dire autant de marques d'intérêt de la part des développeurs, et un demi-million de téléchargements. Lors de l'Ubuntu Summit 26.10, Fitzgerald a expliqué comment il construit grâce à cet outil un bras à six axes peu coûteux, et où tout se casse.
Comment fonctionne text-to-cad
Fitzgerald est diplômé en mécatronique, puis a travaillé dans le développement logiciel, notamment chez WhatsApp, avant de cofonder une entreprise de fintech. De retour en robotique, il a fixé ses objectifs : six degrés de liberté, une portée de 600 mm, une charge utile de 500 g, des composants coûtant moins de 200 dollars et un assemblage en 20 minutes. Il a choisi de réaliser le boîtier en tôle pour sa rigidité. Mais après dix ans sans pratiquer la CAD, travailler dans Onshape s'est révélé difficile.
Il a alors confié la tâche à Codex. Dans Claude Code ou Codex, on installe un serveur MCP local et un ensemble de compétences, c'est-à-dire des instructions au format Markdown décrivant quelles commandes utiliser et dans quel ordre. L'agent écrit un script en build123d, une bibliothèque construite au-dessus du noyau open source Open CASCADE. Il construit ensuite le modèle, réalise une capture, évalue si la forme correspond à la consigne, puis recommence le cycle. Pour les cotes, on peut ajouter des vérifications géométriques dédiées.
Le retour d'information est également pratique. Une face, une arête ou une pièce se sélectionne dans la visionneuse, et un lien contenant un identifiant unique est inséré dans la requête. On peut écrire « décale ce trou vers la droite et double son diamètre », et l'agent identifie précisément l'élément visé. Il retrouve aussi la ligne de code qui a produit cet élément, ce qui est précieux lorsque le script atteint des dizaines de milliers de lignes. Si les mots ne suffisent pas, on peut dessiner des annotations par-dessus la capture. La conservation de la géométrie en mémoire a accéléré les reconstructions : auparavant, même une retouche mineure pouvait coûter deux minutes d'attente pour l'export STEP.
Où les agents se trompent
L'auteur ne cache pas les problèmes. Les modèles retiennent mal les exigences : on demande un support en tôle, et l'on obtient une géométrie multicouche déformée qui ne peut pas être fabriquée telle quelle. Les erreurs s'accumulent à mesure que l'assemblage se complexifie. Aucun modèle n'a encore réussi à concevoir l'intégralité du bras en une seule exécution.
Les erreurs les plus coûteuses apparaissent en production. L'agent a mal exporté le contour en DXF, et après une semaine d'attente, SendCutSend a livré des pièces avec des trous étirés. À l'écran, tout semblait plausible.
Le contraste est également instructif. Le modèle Fable 5.1 a produit en un seul essai, en environ deux jours, le concept d'un moteur automobile complexe : de tels exemples abondent dans les données d'entraînement. Pour un support inhabituel en tôle, cette aide n'existe pas, et même Opus 5.5 n'a apporté qu'une amélioration modeste. Les progrès restent néanmoins visibles : avec le modèle Astra, selon l'auteur, le raisonnement spatial s'est nettement amélioré. L'agent a réalisé une analyse modale du bras oscillant, proposé de retirer une partie de la matière et d'ajouter un anneau de renfort, et le calcul des contraintes a alors montré une baisse.
Ce qui peut encore être automatisé
Au-delà de la géométrie, les agents prennent en charge des tâches voisines :
- calculs : envoi du modèle au solveur open source CalculiX et comparaison des variantes par la méthode des éléments finis ;
- plans : cotes, tolérances et tableaux de perçages, qui prennent parfois aux ingénieurs autant de temps que le modèle lui-même ;
- contrôle de fabricabilité : une compétence lit les exigences de SendCutSend et signale qu'un trou est trop proche d'un pli ou que la tôle ne convient pas au procédé ;
- impression 3D : Jake a décrit le support de caméra depuis son téléphone, depuis la salle de sport, et à son retour la pièce était déjà sur le plateau de l'imprimante ;
- commande : la partie logicielle a été écrite par Claude en environ une demi-heure.
L'avantage pratique principal est que la CAD devient du code. Les scripts sont conservés dans Git, les modifications ont un historique, et dans le catalogue d'exemples, moins de 3 Mo de code génèrent environ 10 Go de modèles. Lorsque les paramètres changent, le fichier URDF, qui décrit les segments, les articulations et leurs limites de mouvement, est reconstruit. On y vérifie la cinématique inverse et l'accessibilité des points de la zone de travail. On peut par exemple réduire de 20° de chaque côté la plage de rotation de l'épaule et savoir combien de points deviennent inaccessibles.
Prévisions et limites
L'auteur prévoit que les ingénieurs lanceront des dizaines, voire des centaines d'agents aux exigences légèrement différentes, puis sélectionneront les meilleures variantes. Pour l'instant, des milliers d'exécutions parallèles pendant plusieurs jours restent trop coûteuses. Il estime aussi qu'un modèle de langage pourra décrire par du code un nombre croissant de types de résultats, jusqu'au contrôle de l'organe terminal du robot. Ce sont pour l'instant des hypothèses, et non des résultats.
Pour les praticiens, la conclusion est la suivante. L'agent est déjà utile pour accélérer la conception de pièces simples, les calculs et la mise en forme des plans, mais les vérifications géométriques et le contrôle de l'export ne doivent pas être retirés du processus. Le projet reste expérimental, et l'image du concept doit encore être confirmée par des calculs d'ingénierie et des essais.
- 21 nov. 2026Huit outils open source pour agents IA : Browser Use en tête avec 121 000 étoiles
- 21 nov. 2026Parallel Search prend la première place du classement de 26 API de recherche pour agents IA avec 83 points
- 21 nov. 2026Serveur MCP en 360 lignes sans SDK : cinq décisions qui ont empêché l'agent de casser les liens
- 21 nov. 2026La vidéo de Claude jouant à GTA 6 ressemble à un fake : une demi-heure de contrôle a épuisé la limite de 5 heures du forfait Pro
Questions clés sur cet article
Comment fonctionne text-to-cad?
Fitzgerald est diplômé en mécatronique, puis a travaillé dans le développement logiciel, notamment chez WhatsApp, avant de cofonder une entreprise de fintech. De retour en robotique, il a fixé ses objectifs : six degrés de liberté, une portée de 600 mm, une charge utile de 500 g, des composants coûtant moins de 200 dollars et un assemblage en 20 minutes. Il a choisi de réaliser le boîtier en tôle pour sa rigidité. Mais après dix ans sans pratiquer la CAD, travailler dans Onshape s'est révélé difficile.
Que sait-on sur Où les agents se trompent ?
L'auteur ne cache pas les problèmes. Les modèles retiennent mal les exigences : on demande un support en tôle, et l'on obtient une géométrie multicouche déformée qui ne peut pas être fabriquée telle quelle. Les erreurs s'accumulent à mesure que l'assemblage se complexifie. Aucun modèle n'a encore réussi à concevoir l'intégralité du bras en une seule exécution. Les erreurs les plus coûteuses apparaissent en production.
Que sait-on sur Ce qui peut encore être automatisé ?
Au-delà de la géométrie, les agents prennent en charge des tâches voisines : calculs : envoi du modèle au solveur open source CalculiX et comparaison des variantes par la méthode des éléments finis ; plans : cotes, tolérances et tableaux de perçages, qui prennent parfois aux ingénieurs autant de temps que le modèle lui-même ; contrôle de fabricabilité : une compétence lit les exigences de SendCutSend et signale qu'un trou est trop proche d'un pli ou que la tôle ne convient pas au procédé ;…
Build & Ship Production AI Agents Without Boilerplate Code
Start your free 72-hour trial at Hamidun Academy (academy.hamidun.com) — interactive lessons on Claude Code & Cursor, live Tech Radar, and production agent templates.
L'essentiel de l'IA — une fois par semaine
Sept actus qui ont vraiment compté, choisies à la main. Sans bruit ni communiqués.
C'est fait ! Vérifiez votre boîte mail pour la confirmation.