granite-4.2-8b
সরকারি · BF16 · safetensors
Runtime সনদপ্রাপ্ত: SGLang Transformers vLLM
| Precision / quantization | ফরম্যাট | বিট | প্রকাশকের বিশ্বাসযোগ্যতা | স্থাপনার অবস্থা |
|---|---|---|---|---|
| BF16 | safetensors | 16 | সরকারি | Runtime সনদপ্রাপ্ত |
IBM Granite · সাধারণ · Granite 4.2
Granite 4.2 8B: বৈশিষ্ট্য, GPU প্রয়োজন, hosting ও deployment
Granite 4.2 8B is a current General release in the IBM Granite family, certified from its immutable official source revision.
মোট প্যারামিটার৮.০B
সক্রিয় প্যারামিটারঘন মডেল
প্রসঙ্গ-উইন্ডো১,৩১,০৭২ tokens
প্রকাশনার অবস্থাবর্তমান · বর্তমান
স্থাপত্যGraniteForCausalLM
মোডালিটিটেক্সট
লাইসেন্সApache 2.0
স্থাপনার অবস্থাসনদপ্রাপ্ত কনফিগারেশনে স্থাপনযোগ্য
বাণিজ্যিক অবস্থাবাণিজ্যিক ব্যবহার অনুমোদিত
প্রকাশের তারিখ2026-08-25
স্থাপত্য, শক্তির দিক ও ব্যবহার
Granite 4.2 8B is an official self-hostable IBM release in the IBM Granite General track. It uses GraniteForCausalLM, carries 8B, supports a verified context window of 131,072 টোকেন, and exposes only source-certified checkpoint and runtime combinations. Its release, license and deployment facts are tied to the official repository revision rather than inferred from the family name.
Granite 4.2 8B uses GraniteForCausalLM with 8B. The stored architecture profile records 40 layers, hidden width 4096, 32 attention heads and a 131,072 টোকেন context ceiling where the official configuration publishes those fields.
Verified GraniteForCausalLM architecture
131,072 টোকেন certified context
Official BF16 checkpoint coverage
Private LLM inference
Agentic workflows
Long-context document processing
সনদপ্রাপ্ত checkpoint ও quantization
শুধু এই release-এর সঙ্গে যুক্ত নির্দিষ্ট, উৎস-সনদপ্রাপ্ত variant দেখানো হয়।
প্রস্তাবিত হার্ডওয়্যার
Use only the listed transformers, vllm, sglang runtime configuration with the exact checkpoint precision. The recommendation engine checks weight memory, KV cache, runtime overhead, safety অতিরিক্ত সক্ষমতার অবকাশ, GPU architecture and topology before ranking rentable and reference hardware.
Weight-এর আনুমানিক memory15.35 GB
KV cache1.25 GB
চালনার অতিরিক্ত সম্পদব্যয়7.71 GB
নিরাপত্তা মার্জিনসহ মোট30.14 GB
সেরা মূল্য-সুবিধার প্রস্তাব
1× NVIDIA A100 SXM 80GB
80 GB মোট VRAM · nvlink
49.86 GB অতিরিক্ত সক্ষমতা · উপলভ্য
USD ৯১৫ / মাসসর্বনিম্ন ব্যয়ের কার্যকর বিকল্প
2× NVIDIA L4 24GB
48 GB মোট VRAM · pcie
17.86 GB অতিরিক্ত সক্ষমতা · উপলভ্য
USD ৫০০ / মাসসর্বোচ্চ কর্মক্ষমতা
1× NVIDIA H200 SXM 141GB
141 GB মোট VRAM · nvswitch
110.86 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা
USD ২,৩৪৫ / মাসলাইসেন্স ও নিজস্ব অবকাঠামোয় চালানোর বিবেচনা
The full 8B resident weight set must fit across the selected GPUs. Context and concurrency add KV-cache memory; MoE active parameters do not replace resident-weight memory.
Granite 4.2 8B is published under Apache 2.0. The release-scoped official license link and verification date are retained with the catalogue record.
বাণিজ্যিক ব্যবহার অনুমোদিত. সরকারি লাইসেন্সে বাণিজ্যিক ব্যবহারের অনুমতি আছে; লাইসেন্সের শর্তগুলো তবুও প্রযোজ্য।
বিকল্প ও একই প্রজন্মের variant
Granite 4.2 30B, Granite 4.2 3B, Granite 4.1 30B
Release-এর সময়রেখা
ibm/granite/granite-4-2-8b
উৎসের বিবরণ
উৎস revision: cab33b9e1d79489645311c751bc727a0c725f637793648e9c33bcccf04de3b78
সাধারণ জিজ্ঞাসা
How much VRAM does Granite 4.2 8B require?
The exact estimate depends on checkpoint precision, context and concurrency; the page recommendation uses the certified memory engine and compatible runtime configurations.
Which runtime সহায়তা Granite 4.2 8B?
Certified upstream runtime evidence is available for transformers, vllm, sglang.
Can Granite 4.2 8B be used commercially?
The stored commercial classification is Commercial Use Allowed. Consult the official Apache 2.0 terms for the final obligations.
সরকারি তথ্যসূত্র
সর্বশেষ যাচাই: 2026-08-26