NVIDIA Nemotron / NVIDIA Nemotron 3.5 Lightning 30B-A3B
Distillation de NVIDIA Nemotron 3.5 Lightning 30B-A3B
Le profil publié est indicatif ; les mesures techniques sont réalisées pour le modèle et le matériel sélectionnés.
Avant → Après
Version de basePoint de contrôle vérifié
30.000B
30.000B
DistillationEnseignant / Modèle étudiant
Objectif de préservation de la qualité
Objectif de préservation de la qualité
Artefact de productionArtefact
Rapport de traçabilité du modèle et de performances
Rapport de traçabilité du modèle et de performances
Sélection du GPU
Poids et cache KVEstimation jusqu’aux mesures d’ingénierie
VRAM estiméeMesuré
Préparation de l’environnement d’exécutiontransformers