اصلي منځپانګې ته ورټوپ کړئ

IBM Granite · عمومي · Granite 4.2

Granite 4.2 8B: ځانګړنې، د GPU اړتیاوې، کوربه‌توب او ځای‌پرځای کول

Granite 4.2 8B is a current General release in the IBM Granite family, certified from its immutable official source revision.

Technical deployment reference illustration for Granite 4.2 8B
Reference deployment flow; exact architecture facts are listed separately.
ټول پارامېټرونه۸٫۰B
فعال پارامېټرونهDense ماډل
د context کړکۍ۱۳۱٬۰۷۲ tokens
د نسخې وضعیتاوسنی · اوسنی
معماريGraniteForCausalLM
موداليټي‌ګانېمتن
جوازApache 2.0
د ځای‌پرځای کولو حالتله تصدیق شوي تنظیم سره ځای‌پرځای کېدای شي
سوداګریز وضعیتسوداګریزه کارونه اجازه لري
د خپرېدو نېټه2026-08-25

معماري، پیاوړتیاوې او کارونې

Granite 4.2 8B is an official self-hostable IBM release in the IBM Granite General track. It uses GraniteForCausalLM, carries 8B, supports a verified context window of 131,072 ټوکنونه, and exposes only source-certified checkpointونه and د اجرا چاپېریال combinations. Its release, license and deployment facts are tied to the official repository revision rather than inferred from the family name.

Granite 4.2 8B uses GraniteForCausalLM with 8B. The stored architecture profile records 40 layers, hidden width 4096, 32 attention heads and a 131,072 ټوکن context ceiling where the official configuration publishes those fields.

Verified GraniteForCausalLM architecture
131,072 ټوکن certified context
Official BF16 checkpoint coverage
Private LLM inference
Agentic workflows
Long-context document processing

تایید شوي checkpoint-ونه او quantization-ونه

یوازې د سرچینې له خوا تصدیق شوې کره بڼې چې له دې نسخې سره تړلې دي، ښودل کېږي.

granite-4.2-8b

ibm-granite/granite-4.2-8b

رسمي · BF16 · safetensors

اجرا چاپېریال تایید شوی: SGLang Transformers vLLM

Precision / quantizationبڼهبټونهپر خپروونکي باورد ځای‌پرځای کولو حالت
BF16safetensors16رسمياجرا چاپېریال تایید شوی

سپارښتل شوی هارډوېیر

Use only the listed transformers, vllm, sglang د اجرا چاپېریال configuration with the exact checkpoint precision. The recommendation engine checks weight memory, KV cache, د اجرا چاپېریال overhead, safety اضافي ظرفیت, GPU architecture and topology before ranking rentable and reference hardware.

د وزنونو اټکلي حافظه15.35 GB
KV cache1.25 GB
د اجرا چاپېریال اضافي اړتیا7.71 GB
ټول له خوندیتوب حاشیې سره30.14 GB

د ارزښت له مخې غوره سپارښتنه

1× NVIDIA A100 SXM 80GB

80 GB ټول VRAM · nvlink

49.86 GB اضافي ظرفیت · شته

USD ۹۱۵ / میاشت

د عملي انتخابونو تر ټولو ټیټ لګښت

2× NVIDIA L4 24GB

48 GB ټول VRAM · pcie

17.86 GB اضافي ظرفیت · شته

USD ۵۰۰ / میاشت

تر ټولو لوړ فعالیت

1× NVIDIA H200 SXM 141GB

141 GB ټول VRAM · nvswitch

110.86 GB اضافي ظرفیت · محدود ظرفیت

USD ۲٬۳۴۵ / میاشت

د جواز او خپل کوربه‌توب ملاحظات

The full 8B resident weight set must fit across the selected GPUs. Context and concurrency add KV-cache memory; MoE active parameters do not replace resident-weight memory.

Granite 4.2 8B is published under Apache 2.0. The release-scoped official license link and verification date are retained with the catalogue record.

سوداګریزه کارونه اجازه لري. رسمي جواز سوداګریزه کارونه اجازه کوي؛ د جواز نور مکلفیتونه هم پر خپل ځای دي.

بدیلونه او هم‌نسله بڼې

Granite 4.2 30B, Granite 4.2 3B, Granite 4.1 30B

د نسخو مهالوېش

ibm/granite/granite-4-2-8b

د سرچینې جزئیات

رسمي سرچینه

د سرچینې revision: cab33b9e1d79489645311c751bc727a0c725f637793648e9c33bcccf04de3b78

ډېرې پوښتل شوې پوښتنې

How much VRAM does Granite 4.2 8B require?

The exact estimate depends on checkpoint precision, context and concurrency; the page recommendation uses the certified memory engine and compatible د اجرا چاپېریال configurations.

Which د اجرا چاپېریالونه ملاتړ Granite 4.2 8B?

Certified upstream د اجرا چاپېریال evidence is available for transformers, vllm, sglang.

Can Granite 4.2 8B be used commercially?

The stored commercial classification is Commercial Use Allowed. Consult the official Apache 2.0 terms for the final obligations.

رسمي مراجع

وروستی تایید: 2026-08-26