GLM / GLM-5
Quantification FP8 pour GLM-5
Le profil publié est indicatif ; les mesures techniques sont réalisées pour le modèle et le matériel sélectionnés.
Avant → Après
Version de basePoint de contrôle vérifié
744.000B
744.000B
QuantificationFP8
Objectif de préservation de la qualité
Objectif de préservation de la qualité
Artefact de productionArtefact
Rapport de traçabilité du modèle et de performances
Rapport de traçabilité du modèle et de performances
Sélection du GPU
Poids et cache KVEstimation jusqu’aux mesures d’ingénierie
VRAM estiméeLes résultats mesurés et certifiés sont livrés avec le projet.
Préparation de l’environnement d’exécutiontransformers