Qwen3 8B : combien de VRAM ?
En Q4_K_M avec 8k tokens de contexte, Qwen3 8B demande environ 7 Go de mémoire. La solution la moins chère : RTX 3060 12 Go (1 180 € machine complète).
Fiche
ollama run qwen3:8bPoids sur Hugging Face : Qwen/Qwen3-8B
VRAM selon la précision et le contexte
| Précision | 4k | 8k | 32k | 128k |
|---|---|---|---|---|
| FP16 | 18 Go | 19 Go | 22 Go | 36 Go |
| FP8 | 10 Go | 10 Go | 13 Go | 27 Go |
| Q8_0 | 10 Go | 11 Go | 14 Go | 27 Go |
| Q6_K | 8 Go | 9 Go | 12 Go | 25 Go |
| Q4_K_M | 6 Go | 7 Go | 10 Go | 23 Go |
| Q3_K_M | 5 Go | 6 Go | 9 Go | 23 Go |
Un seul utilisateur. Chaque utilisateur simultané ajoute son propre cache de contexte.
Questions fréquentes
Combien de VRAM faut-il pour Qwen3 8B ?
Avec 8k tokens de contexte et un utilisateur, Qwen3 8B demande environ 7 Go en Q4, 11 Go en Q8 et 19 Go en FP16.
Quel est le matériel le moins cher pour Qwen3 8B ?
En Q4, la solution la moins chère de notre catalogue pour Qwen3 8B est RTX 3060 12 Go, environ 1 180 € pour la machine complète.
À quelle vitesse tourne Qwen3 8B ?
Comptez environ 39 tokens par seconde pour un utilisateur sur RTX 3060 12 Go en Q4 (estimation d’après la bande passante mémoire).
Sur quel matériel ?
| Matériel | Cartes | Vitesse | Machine |
|---|---|---|---|
| RTX 3060 12 Go | 1 suffit | ~39 tok/s | 1 180 € |
| RTX 4060 Ti 16 Go | 1 suffit | ~31 tok/s | 1 350 € |
| Radeon RX 7800 XT 16 Go | 1 suffit | ~68 tok/s | 1 400 € |
| RTX 4070 12 Go | 1 suffit | ~55 tok/s | 1 450 € |
| RTX 3090 24 Go (occasion) | 1 suffit | ~102 tok/s | 1 650 € |
| RTX 4070 Ti SUPER 16 Go | 1 suffit | ~73 tok/s | 1 750 € |
| Radeon RX 7900 XTX 24 Go | 1 suffit | ~104 tok/s | 1 850 € |
| RTX 4080 SUPER 16 Go | 1 suffit | ~80 tok/s | 1 950 € |
| RTX 5080 16 Go | 1 suffit | ~104 tok/s | 2 100 € |
| Mini-PC Ryzen AI Max+ 395 128 Go | 1 suffit | ~28 tok/s | 2 300 € |
| RTX 4090 24 Go | 1 suffit | ~109 tok/s | 2 900 € |
| RTX 5090 32 Go | 1 suffit | ~194 tok/s | 3 500 € |
| NVIDIA DGX Spark 128 Go | 1 suffit | ~30 tok/s | 4 000 € |
| Mac Studio M4 Max 128 Go | 1 suffit | ~59 tok/s | 4 400 € |
| RTX 6000 Ada 48 Go | 1 suffit | ~104 tok/s | 7 900 € |
| RTX PRO 6000 Blackwell 96 Go | 1 suffit | ~194 tok/s | 9 900 € |
| Mac Studio M3 Ultra 512 Go | 1 suffit | ~89 tok/s | 11 500 € |
| L40S 48 Go | 1 suffit | ~94 tok/s | 13 500 € |
| A100 80 Go | 1 suffit | ~221 tok/s | 17 000 € |
| H100 80 Go | 1 suffit | ~363 tok/s | 34 000 € |
| H200 141 Go | 1 suffit | ~521 tok/s | 39 000 € |
| B200 192 Go | 1 suffit | ~868 tok/s | 48 000 € |
Machine complète estimée : cartes + PC hôte (900 € pour 1 à 2 cartes grand public, 2 800 € au-delà, 6 000 € de serveur pour les cartes datacenter). Les Mac et mini-PC sont vendus complets.
Modèles proches
Dès : RTX 3060 12 Go · 1 180 €
Dès : RTX 3060 12 Go · 1 180 €
Dès : RTX 3060 12 Go · 1 180 €
Dès : RTX 3060 12 Go · 1 180 €