Des modèles locaux sur carte graphique : Qwen et Gemma à l'épreuve de la Tesla V100

Sortie en 2017, la Tesla V100 fait tourner des LLM récents comme Qwen35B et GPT-OSS-20B. La vitesse de génération va de 38 à 109 tokens par seconde selon le modèle. Au programme des tests : création de sites web et de jeux, traitement de documents. Il faut au minimum 16 Go de mémoire, mais 24 Go restent préférables pour un usage polyvalent.

Traité par IA depuis Habr AI ; édité par Hamidun News
Des modèles locaux sur carte graphique : Qwen et Gemma à l'épreuve de la Tesla V100
Source : Habr AI. Collage: Hamidun News.
Écouter l'article

On peut faire tourner des modèles d'IA en local sur des cartes graphiques sorties dès 2017. Nous avons testé cinq modèles ouverts populaires (de Qwen à Gemma) sur une Tesla V100, dans cinq scénarios concrets : de la génération de texte à l'écriture de code et à la création de jeux.

Quels modèles de texte tournent sur une V100 ?

Le test porte sur cinq modèles ouverts, dont Qwen et Gemma. La vitesse atteint 38–109 tokens par seconde selon le modèle et la quantification.

Peut-on utiliser une vieille V100 pour des modèles d'IA en local ?

Oui : d'après le test, la V100 fait tourner des LLM récents pour générer du texte, écrire du code et couvrir d'autres scénarios concrets.

Combien de tokens par seconde la

Tesla V100 délivre-t-elle avec des modèles locaux ? De 38 à 109 tokens par seconde, selon le modèle, sa taille et la quantification.

Dossier

Questions clés sur cet article

Quels modèles de texte tournent sur une V100 ?

Le test porte sur cinq modèles ouverts, dont Qwen et Gemma. La vitesse atteint 38–109 tokens par seconde selon le modèle et la quantification.

Peut-on utiliser une vieille V100 pour des modèles d'IA en local ?

Oui : d'après le test, la V100 fait tourner des LLM récents pour générer du texte, écrire du code et couvrir d'autres scénarios concrets.

Combien de tokens par seconde la Tesla V100 délivre-t-elle avec des modèles locaux ?

De 38 à 109 tokens par seconde, selon le modèle, sa taille et la quantification.

ZK
Zhemal Khamidun — CPO d'Alpina Digital, product manager d'AlpinaGPT. Conçoit des produits IA depuis 2019. Hamidun News est un projet personnel devenu un agrégateur en production avec plus de 6 000 lecteurs.
✦ Unified AI Workspace · Nomad

Test Frontier LLMs & Autonomous Agents in One Workspace

Run Claude Opus 5.5, GPT-6, Gemini 3.1, and DeepSeek side-by-side in Nomad AI (nomadnet.ai) — unified model routing, deep research, and multimodal workflows under one subscription.

Try Nomad AI →Launch Nomad Agent
Qu'en pensez-vous ?
Chargement des commentaires…