GLM / GLM-5
Cuantización FP8 para GLM-5
El perfil publicado es orientativo; las mediciones técnicas se realizan para el modelo y el hardware seleccionados.
Antes → Después
Versión basePunto de control verificado
744.000B
744.000B
CuantizaciónFP8
Objetivo de conservación de calidad
Objetivo de conservación de calidad
Artefacto de producciónArtefacto
Informe de trazabilidad y resultados de rendimiento
Informe de trazabilidad y resultados de rendimiento
Selección de GPU
Pesos y cache KVEstimado hasta su medición durante la ingeniería
VRAM estimadaLos resultados medidos y certificados se entregan con el proyecto.
Preparación del entorno de ejecucióntransformers