Перейти к основному содержимому

IBM Granite · Общий · Granite 4.2

Granite 4.2 8B: характеристики, требования к GPU, хостинг и развертывание

Granite 4.2 8B — версия Текущий направления Общий семейства IBM Granite, подтвержденная официальной ревизией.

Рассчитать рекомендацию Настроить модель Корпоративная трансформация моделей Сравнить эту модель
Техническая схема развертывания Granite 4.2 8B
Эталонный поток; точные данные указаны отдельно.
Всего параметров8,0B
Активные параметрыПлотная модель
Окно контекста131 072 tokens
Статус версииТекущий · Текущий
АрхитектураGraniteForCausalLM
МодальностиТекст
ЛицензияЛицензия Apache 2.0
Статус развертыванияРазвертывается с сертифицированной конфигурацией
Коммерческий статусКоммерческое использование разрешено
Дата выпуска2026-08-25

Архитектура, преимущества и сценарии

Granite 4.2 8B — официальная модель IBM для самостоятельного хостинга в направлении IBM Granite Общий. Архитектура GraniteForCausalLM, 8B и проверенный контекст 131,072 токенов.

Granite 4.2 8B использует GraniteForCausalLM с 8B. Профиль содержит 40 слоев, ширину 4096 и 32 голов внимания, если они опубликованы.

Проверенная архитектура GraniteForCausalLM
Сертифицированный контекст 131,072 токенов
Официальное происхождение чекпоинта
Частный LLM-инференс
Агентные процессы
Обработка длинных документов

Сертифицированные чекпоинты и квантования

Показаны только точные варианты этой версии, подтвержденные источником.

granite-4.2-8b

ibm-granite/granite-4.2-8b

Официальный · BF16 · safetensors

Проверенная среда выполнения: SGLang Transformers vLLM

Точность / квантованиеФорматБитыДоверие к издателюСтатус развертывания
BF16safetensors16ОфициальныйПроверенная среда выполнения

Рекомендуемое оборудование

Используйте только сертифицированные конфигурации среды выполнения с точной разрядностью чекпоинта. Рейтинг проверяет веса, KV-кэш, накладные расходы, архитектуру GPU и топологию.

Оценка памяти весов15.35 GB
KV-кэш1.25 GB
Накладные расходы среды выполнения7.71 GB
Итого с запасом30.14 GB

Рекомендуемое соотношение цены и качества

1× NVIDIA A100 SXM 80GB

80 GB общая VRAM · nvlink

49.86 GB запаса · Доступно

USD 915 / месяц

Самый дешевый подходящий вариант

2× NVIDIA L4 24GB

48 GB общая VRAM · pcie

17.86 GB запаса · Доступно

USD 500 / месяц

Максимальная производительность

1× NVIDIA H200 SXM 141GB

141 GB общая VRAM · nvswitch

110.86 GB запаса · Ограниченная мощность

USD 2 345 / месяц

Лицензия и самостоятельный хостинг

Все 8 B резидентных весов должны поместиться на выбранных GPU. Контекст и параллельность увеличивают KV-кэш.

Granite 4.2 8B опубликована под лицензией Лицензия Apache 2.0. Сохраняются официальный URL и дата проверки.

Коммерческое использование разрешено. Официальная лицензия разрешает коммерческое использование; ее условия остаются обязательными.

Альтернативы и варианты одного поколения

Granite 4.2 30B, Granite 4.2 3B, Granite 4.1 30B

История версии

ibm/granite/granite-4-2-8b

Сведения об источнике

Официальный источник

Ревизия источника: cab33b9e1d79489645311c751bc727a0c725f637793648e9c33bcccf04de3b78

Частые вопросы

Сколько VRAM требуется для Granite 4.2 8B?

Оценка зависит от точности, контекста и параллельности и использует сертифицированные данные.

Какие среды выполнения поддерживают Granite 4.2 8B?

Официальные подтверждения сертифицированы для transformers, vllm, sglang.

Можно ли использовать Granite 4.2 8B коммерчески?

Сохраненная классификация: Коммерческое использование разрешено. Смотрите официальные условия Лицензия Apache 2.0.

Официальные источники

Последняя проверка: 2026-08-26