StepFun / Step3-VL 10B
Quantisierung mit FP8 für Step3-VL 10B
Das veröffentlichte Profil dient zur Orientierung; die technischen Messungen erfolgen mit dem gewählten Modell und der Zielhardware.
Vorher → Nachher
BasisversionVerifizierter Checkpoint
10.000B
10.000B
QuantisierungFP8
Ziel für Qualitätserhalt
Ziel für Qualitätserhalt
ProduktionsartefaktArtefakt
Bericht zur Modellherkunft und Leistungsbewertung
Bericht zur Modellherkunft und Leistungsbewertung
GPU-Auswahl
Gewichte und KV-CacheBis zur technischen Messung geschätzt
Geschätzter VRAMGemessene und zertifizierte Ergebnisse werden mit dem Projekt geliefert.
Aufbereitung der Laufzeitumgebungtransformers