Qwen3 32B : combien de VRAM ?
En Q4_K_M avec 8k tokens de contexte, Qwen3 32B demande environ 23 Go de mémoire. La solution la moins chère : 2 × RTX 3060 12 Go (1 460 € machine complète).
Fiche
ollama run qwen3:32bPoids sur Hugging Face : Qwen/Qwen3-32B
VRAM selon la précision et le contexte
| Précision | 4k | 8k | 32k | 128k |
|---|---|---|---|---|
| FP16 | 70 Go | 71 Go | 77 Go | 101 Go |
| FP8 | 36 Go | 37 Go | 43 Go | 67 Go |
| Q8_0 | 38 Go | 39 Go | 45 Go | 69 Go |
| Q6_K | 30 Go | 31 Go | 37 Go | 61 Go |
| Q4_K_M | 22 Go | 23 Go | 29 Go | 53 Go |
| Q3_K_M | 18 Go | 19 Go | 25 Go | 49 Go |
Un seul utilisateur. Chaque utilisateur simultané ajoute son propre cache de contexte.
Questions fréquentes
Combien de VRAM faut-il pour Qwen3 32B ?
Avec 8k tokens de contexte et un utilisateur, Qwen3 32B demande environ 23 Go en Q4, 39 Go en Q8 et 71 Go en FP16.
Quel est le matériel le moins cher pour Qwen3 32B ?
En Q4, la solution la moins chère de notre catalogue pour Qwen3 32B est 2 × RTX 3060 12 Go, environ 1 460 € pour la machine complète.
À quelle vitesse tourne Qwen3 32B ?
Comptez environ 15 tokens par seconde pour un utilisateur sur 2 × RTX 3060 12 Go en Q4 (estimation d’après la bande passante mémoire).
Sur quel matériel ?
| Matériel | Cartes | Vitesse | Machine |
|---|---|---|---|
| RTX 3060 12 Go | 2 cartes | ~15 tok/s | 1 460 € |
| RTX 3090 24 Go (occasion) | 1 suffit | ~26 tok/s | 1 650 € |
| RTX 4060 Ti 16 Go | 2 cartes | ~12 tok/s | 1 800 € |
| Radeon RX 7900 XTX 24 Go | 1 suffit | ~27 tok/s | 1 850 € |
| Radeon RX 7800 XT 16 Go | 2 cartes | ~26 tok/s | 1 900 € |
| RTX 4070 12 Go | 2 cartes | ~21 tok/s | 2 000 € |
| Mini-PC Ryzen AI Max+ 395 128 Go | 1 suffit | ~7,1 tok/s | 2 300 € |
| RTX 4070 Ti SUPER 16 Go | 2 cartes | ~28 tok/s | 2 600 € |
| RTX 4090 24 Go | 1 suffit | ~28 tok/s | 2 900 € |
| RTX 4080 SUPER 16 Go | 2 cartes | ~31 tok/s | 3 000 € |
| RTX 5080 16 Go | 2 cartes | ~40 tok/s | 3 300 € |
| RTX 5090 32 Go | 1 suffit | ~50 tok/s | 3 500 € |
| NVIDIA DGX Spark 128 Go | 1 suffit | ~7,6 tok/s | 4 000 € |
| Mac Studio M4 Max 128 Go | 1 suffit | ~15 tok/s | 4 400 € |
| RTX 6000 Ada 48 Go | 1 suffit | ~27 tok/s | 7 900 € |
| RTX PRO 6000 Blackwell 96 Go | 1 suffit | ~50 tok/s | 9 900 € |
| Mac Studio M3 Ultra 512 Go | 1 suffit | ~23 tok/s | 11 500 € |
| L40S 48 Go | 1 suffit | ~24 tok/s | 13 500 € |
| A100 80 Go | 1 suffit | ~57 tok/s | 17 000 € |
| H100 80 Go | 1 suffit | ~93 tok/s | 34 000 € |
| H200 141 Go | 1 suffit | ~133 tok/s | 39 000 € |
| B200 192 Go | 1 suffit | ~222 tok/s | 48 000 € |
Machine complète estimée : cartes + PC hôte (900 € pour 1 à 2 cartes grand public, 2 800 € au-delà, 6 000 € de serveur pour les cartes datacenter). Les Mac et mini-PC sont vendus complets.
Modèles proches
Dès : RTX 3060 12 Go · 1 180 €
Dès : RTX 3060 12 Go · 1 180 €
Dès : RTX 3060 12 Go · 1 180 €
Dès : RTX 4060 Ti 16 Go · 1 350 €