ERNIE / ERNIE 4.5 21B-A3B
Дистилляция модели ERNIE 4.5 21B-A3B
Опубликованные показатели предварительные; технические измерения выполняются для выбранной модели и оборудования.
До → После
Базовый релизПроверенный чекпойнт
21.000B
21.000B
ДистилляцияУчитель / Ученик
Цель сохранения качества
Цель сохранения качества
Производственный артефактАртефакт
Отчёт о происхождении модели и результатах тестирования
Отчёт о происхождении модели и результатах тестирования
Выбор GPU
Веса и KV-кэшРасчет до измерения в ходе инженерной работы
Расчётная VRAMИзмеренные и сертифицированные результаты предоставляются вместе с проектом.
Подготовка среды выполненияfastdeploy