মূল content-এ যান

Mistral · মাঝারি সাধারণ মডেল · Mistral Medium 3.5

Mistral Medium 3.5 128B: বৈশিষ্ট্য, GPU প্রয়োজন, hosting ও deployment

Mistral Medium 3.5 128B is a current Generalist Medium release in the Mistral family, certified from its immutable official source revision.

Technical deployment reference illustration for Mistral Medium 3.5 128B
Reference deployment flow; exact architecture facts are listed separately.
মোট প্যারামিটার১২৮.০B
সক্রিয় প্যারামিটারঘন মডেল
প্রসঙ্গ-উইন্ডো২,৬২,১৪৪ tokens
প্রকাশনার অবস্থাবর্তমান · বর্তমান
স্থাপত্যMistral3ForConditionalGeneration
মোডালিটিটেক্সট
লাইসেন্সMIT
স্থাপনার অবস্থাসনদপ্রাপ্ত কনফিগারেশনে স্থাপনযোগ্য
বাণিজ্যিক অবস্থাশর্তসাপেক্ষে বাণিজ্যিক ব্যবহার অনুমোদিত
প্রকাশের তারিখ2026-03-31

স্থাপত্য, শক্তির দিক ও ব্যবহার

Mistral Medium 3.5 128B is an official self-hostable Mistral AI release in the Mistral Generalist Medium track. It uses Mistral3ForConditionalGeneration, carries 128B, supports a verified context window of 262,144 টোকেন, and exposes only source-certified checkpoint and runtime combinations. Its release, license and deployment facts are tied to the official repository revision rather than inferred from the family name.

Mistral Medium 3.5 128B uses Mistral3ForConditionalGeneration with 128B. The stored architecture profile records 88 layers, hidden width 12288, 96 attention heads and a 262,144 টোকেন context ceiling where the official configuration publishes those fields.

Verified Mistral3ForConditionalGeneration architecture
262,144 টোকেন certified context
Official FP8 checkpoint coverage
Private LLM inference
Agentic workflows
Long-context document processing

সনদপ্রাপ্ত checkpoint ও quantization

শুধু এই release-এর সঙ্গে যুক্ত নির্দিষ্ট, উৎস-সনদপ্রাপ্ত variant দেখানো হয়।

Mistral-Medium-3.5-128B

mistralai/Mistral-Medium-3.5-128B

সরকারি · FP8 · safetensors

Runtime সনদপ্রাপ্ত: Transformers vLLM SGLang

Precision / quantizationফরম্যাটবিটপ্রকাশকের বিশ্বাসযোগ্যতাস্থাপনার অবস্থা
FP8safetensors8সরকারিRuntime সনদপ্রাপ্ত

প্রস্তাবিত হার্ডওয়্যার

Use only the listed transformers, vllm, sglang runtime configuration with the exact checkpoint precision. The recommendation engine checks weight memory, KV cache, runtime overhead, safety অতিরিক্ত সক্ষমতার অবকাশ, GPU architecture and topology before ranking rentable and reference hardware.

Weight-এর আনুমানিক memory122.79 GB
KV cache1.38 GB
চালনার অতিরিক্ত সম্পদব্যয়40.47 GB
নিরাপত্তা মার্জিনসহ মোট204.15 GB

সেরা মূল্য-সুবিধার প্রস্তাব

2× NVIDIA H200 SXM 141GB

282 GB মোট VRAM · nvswitch

77.85 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ৪,৬৯০ / মাস

সর্বনিম্ন ব্যয়ের কার্যকর বিকল্প

2× NVIDIA H200 SXM 141GB

282 GB মোট VRAM · nvswitch

77.85 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ৪,৬৯০ / মাস

সর্বোচ্চ কর্মক্ষমতা

2× NVIDIA H200 SXM 141GB

282 GB মোট VRAM · nvswitch

77.85 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ৪,৬৯০ / মাস

লাইসেন্স ও নিজস্ব অবকাঠামোয় চালানোর বিবেচনা

The full 128B resident weight set must fit across the selected GPUs. Context and concurrency add KV-cache memory; MoE active parameters do not replace resident-weight memory.

Mistral Medium 3.5 128B is published under MIT. The release-scoped official license link and verification date are retained with the catalogue record.

শর্তসাপেক্ষে বাণিজ্যিক ব্যবহার অনুমোদিত. বাণিজ্যিক ব্যবহার শর্তসাপেক্ষ। ডেপ্লয়মেন্টের আগে লিংক করা সরকারি শর্তগুলো পর্যালোচনা করুন।

বিকল্প ও একই প্রজন্মের variant

Mistral-Medium-3.5-128B, Mistral-Medium-3.5-128B-NVFP4, Mistral-Medium-3.5-128B-EAGLE

Release-এর সময়রেখা

mistral-ai/mistral/mistral-medium-3-5-128b

উৎসের বিবরণ

সরকারি উৎস

উৎস revision: bd6dc6b9d18a72d3a09e68492438a99b4c0bc8ced688686458f2e9e2116d5a87

সাধারণ জিজ্ঞাসা

How much VRAM does Mistral Medium 3.5 128B require?

The exact estimate depends on checkpoint precision, context and concurrency; the page recommendation uses the certified memory engine and compatible runtime configurations.

Which runtime সহায়তা Mistral Medium 3.5 128B?

Certified upstream runtime evidence is available for transformers, vllm, sglang.

Can Mistral Medium 3.5 128B be used commercially?

The stored commercial classification is Commercial Use Allowed With Conditions. Consult the official MIT terms for the final obligations.

সরকারি তথ্যসূত্র

সর্বশেষ যাচাই: 2026-08-26