GLM / GLM-4.6V
Cuantización FP8 para GLM-4.6V
El perfil publicado es orientativo; las mediciones técnicas se realizan para el modelo y el hardware seleccionados.
Antes → Después
Versión basePunto de control verificado
107.710B
107.710B
CuantizaciónFP8
Objetivo de conservación de calidad
Objetivo de conservación de calidad
Artefacto de producciónArtefacto
Informe de trazabilidad y resultados de rendimiento
Informe de trazabilidad y resultados de rendimiento
Selección de GPU
Pesos y cache KVEstimado hasta su medición durante la ingeniería
VRAM estimadaMedido
Preparación del entorno de ejecucióntransformers, vllm, sglang