মূল content-এ যান

NVIDIA Nemotron · সাধারণ · Nemotron 3

NVIDIA Nemotron 3 Super 120B-A12B: বৈশিষ্ট্য, GPU প্রয়োজন, hosting ও deployment

NVIDIA Nemotron 3 Super 120B-A12B is a recent General release in the NVIDIA Nemotron family, certified from its immutable official source revision.

Technical deployment reference illustration for NVIDIA Nemotron 3 Super 120B-A12B
Reference deployment flow; exact architecture facts are listed separately.
মোট প্যারামিটার১২০.০B
সক্রিয় প্যারামিটার১২.০B
প্রসঙ্গ-উইন্ডো২,৬২,১৪৪ tokens
প্রকাশনার অবস্থাসাম্প্রতিক · সাম্প্রতিক
স্থাপত্যNemotronHForCausalLM
মোডালিটিটেক্সট
লাইসেন্সNVIDIA Nemotron
স্থাপনার অবস্থাসনদপ্রাপ্ত কনফিগারেশনে স্থাপনযোগ্য
বাণিজ্যিক অবস্থাশর্তসাপেক্ষে বাণিজ্যিক ব্যবহার অনুমোদিত
প্রকাশের তারিখ2026-03-10

স্থাপত্য, শক্তির দিক ও ব্যবহার

NVIDIA Nemotron 3 Super 120B-A12B is an official self-hostable NVIDIA release in the NVIDIA Nemotron General track. It uses NemotronHForCausalLM, carries 120B / 12B MoE, supports a verified context window of 262,144 টোকেন, and exposes only source-certified checkpoint and runtime combinations. Its release, license and deployment facts are tied to the official repository revision rather than inferred from the family name.

NVIDIA Nemotron 3 Super 120B-A12B uses NemotronHForCausalLM with 120B / 12B MoE. The stored architecture profile records 88 layers, hidden width 4096, 32 attention heads and a 262,144 টোকেন context ceiling where the official configuration publishes those fields.

Verified NemotronHForCausalLM architecture
262,144 টোকেন certified context
Official FP8, Unknown checkpoint coverage
Private LLM inference
Agentic workflows
Long-context document processing

সনদপ্রাপ্ত checkpoint ও quantization

শুধু এই release-এর সঙ্গে যুক্ত নির্দিষ্ট, উৎস-সনদপ্রাপ্ত variant দেখানো হয়।

NVIDIA-Nemotron-3-Super-120B-A12B-FP8

nvidia/NVIDIA-Nemotron-3-Super-120B-A12B-FP8

সরকারি · FP8 · safetensors

Runtime সনদপ্রাপ্ত: Transformers TensorRT-LLM

Precision / quantizationফরম্যাটবিটপ্রকাশকের বিশ্বাসযোগ্যতাস্থাপনার অবস্থা
FP8safetensors8সরকারিRuntime সনদপ্রাপ্ত

প্রস্তাবিত হার্ডওয়্যার

Use only the listed transformers, tensorrt-llm runtime configuration with the exact checkpoint precision. The recommendation engine checks weight memory, KV cache, runtime overhead, safety অতিরিক্ত সক্ষমতার অবকাশ, GPU architecture and topology before ranking rentable and reference hardware.

Weight-এর আনুমানিক memory115.11 GB
KV cache0.34 GB
চালনার অতিরিক্ত সম্পদব্যয়37.77 GB
নিরাপত্তা মার্জিনসহ মোট190 GB

সেরা মূল্য-সুবিধার প্রস্তাব

3× NVIDIA H100 SXM 80GB

240 GB মোট VRAM · nvswitch

50 GB অতিরিক্ত সক্ষমতা · উপলভ্য

USD ৫,৫৮০ / মাস

সর্বনিম্ন ব্যয়ের কার্যকর বিকল্প

2× NVIDIA H200 SXM 141GB

282 GB মোট VRAM · nvswitch

92 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ৪,৬৯০ / মাস

সর্বোচ্চ কর্মক্ষমতা

2× NVIDIA H200 SXM 141GB

282 GB মোট VRAM · nvswitch

92 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ৪,৬৯০ / মাস

লাইসেন্স ও নিজস্ব অবকাঠামোয় চালানোর বিবেচনা

The full 120B resident weight set must fit across the selected GPUs. Context and concurrency add KV-cache memory; MoE active parameters do not replace resident-weight memory.

NVIDIA Nemotron 3 Super 120B-A12B is published under NVIDIA Nemotron. The release-scoped official license link and verification date are retained with the catalogue record.

শর্তসাপেক্ষে বাণিজ্যিক ব্যবহার অনুমোদিত. বাণিজ্যিক ব্যবহার শর্তসাপেক্ষ। ডেপ্লয়মেন্টের আগে লিংক করা সরকারি শর্তগুলো পর্যালোচনা করুন।

বিকল্প ও একই প্রজন্মের variant

NVIDIA Nemotron 3 Ultra 550B-A55B, NVIDIA Nemotron 3.5 Lightning 30B-A3B, NVIDIA-Nemotron-3-Ultra-550B-A55B-NVFP4

Release-এর সময়রেখা

nvidia/nemotron/nemotron-3-super-120b-a12b

উৎসের বিবরণ

সরকারি উৎস

উৎস revision: 680e0e5a3131d196ec831e0f1d320c7e0a5405faac89108daf9591babe14134c

সাধারণ জিজ্ঞাসা

How much VRAM does NVIDIA Nemotron 3 Super 120B-A12B require?

The exact estimate depends on checkpoint precision, context and concurrency; the page recommendation uses the certified memory engine and compatible runtime configurations.

Which runtime সহায়তা NVIDIA Nemotron 3 Super 120B-A12B?

Certified upstream runtime evidence is available for transformers, tensorrt-llm.

Can NVIDIA Nemotron 3 Super 120B-A12B be used commercially?

The stored commercial classification is Commercial Use Allowed With Conditions. Consult the official NVIDIA Nemotron terms for the final obligations.

সরকারি তথ্যসূত্র

সর্বশেষ যাচাই: 2026-08-26