ERNIE / ERNIE 4.5 21B-A3B Thinking
Destilação de ERNIE 4.5 21B-A3B Thinking
O perfil publicado é indicativo; as medições técnicas são realizadas para o modelo e o hardware selecionados.
Antes → Depois
Lançamento baseCheckpoint verificado
21.000B
21.000B
DestilaçãoProfessor / Aluno
Objetivo de retenção de qualidade
Objetivo de retenção de qualidade
Artefacto de produçãoArtefacto
Relatório de linhagem e resultados dos testes de desempenho
Relatório de linhagem e resultados dos testes de desempenho
Seleção de GPU
Pesos e cache KVEstimado até à medição durante a engenharia
VRAM estimadaOs resultados medidos e certificados são entregues com o projeto.
Preparação do ambiente de execuçãofastdeploy, transformers, vllm