Mistral / Devstral Small 2 24B
Quantification FP8 pour Devstral Small 2 24B
Le profil publié est indicatif ; les mesures techniques sont réalisées pour le modèle et le matériel sélectionnés.
Avant → Après
Version de basePoint de contrôle vérifié
24.000B
24.000B
QuantificationFP8
Objectif de préservation de la qualité
Objectif de préservation de la qualité
Artefact de productionArtefact
Rapport de traçabilité du modèle et de performances
Rapport de traçabilité du modèle et de performances
Sélection du GPU
Poids et cache KVEstimation jusqu’aux mesures d’ingénierie
VRAM estiméeLes résultats mesurés et certifiés sont livrés avec le projet.
Préparation de l’environnement d’exécutiontransformers, vllm, sglang