মূল content-এ যান

Mistral · Devstral · Devstral 2

Devstral Small 2 24B: বৈশিষ্ট্য, GPU প্রয়োজন, hosting ও deployment

Devstral Small 2 24B is a current Devstral release in the Mistral family, certified from its immutable official source revision.

Technical deployment reference illustration for Devstral Small 2 24B
Reference deployment flow; exact architecture facts are listed separately.
মোট প্যারামিটার২৪.০B
সক্রিয় প্যারামিটারঘন মডেল
প্রসঙ্গ-উইন্ডো৩,৯৩,২১৬ tokens
প্রকাশনার অবস্থাবর্তমান · বর্তমান
স্থাপত্যMistral3ForConditionalGeneration
মোডালিটিটেক্সট
লাইসেন্সApache 2.0
স্থাপনার অবস্থাসনদপ্রাপ্ত কনফিগারেশনে স্থাপনযোগ্য
বাণিজ্যিক অবস্থাবাণিজ্যিক ব্যবহার অনুমোদিত
প্রকাশের তারিখ2025-11-28

স্থাপত্য, শক্তির দিক ও ব্যবহার

Devstral Small 2 24B is an official self-hostable Mistral AI release in the Mistral Devstral track. It uses Mistral3ForConditionalGeneration, carries 24B, supports a verified context window of 393,216 টোকেন, and exposes only source-certified checkpoint and runtime combinations. Its release, license and deployment facts are tied to the official repository revision rather than inferred from the family name.

Devstral Small 2 24B uses Mistral3ForConditionalGeneration with 24B. The stored architecture profile records 40 layers, hidden width 5120, 32 attention heads and a 393,216 টোকেন context ceiling where the official configuration publishes those fields.

Verified Mistral3ForConditionalGeneration architecture
393,216 টোকেন certified context
Official FP8 checkpoint coverage
Private LLM inference
Agentic workflows
Long-context document processing
Software engineering and code generation

সনদপ্রাপ্ত checkpoint ও quantization

শুধু এই release-এর সঙ্গে যুক্ত নির্দিষ্ট, উৎস-সনদপ্রাপ্ত variant দেখানো হয়।

Devstral-Small-2-24B-Instruct-2512

mistralai/Devstral-Small-2-24B-Instruct-2512

সরকারি · FP8 · safetensors

Runtime সনদপ্রাপ্ত: Transformers vLLM SGLang

Precision / quantizationফরম্যাটবিটপ্রকাশকের বিশ্বাসযোগ্যতাস্থাপনার অবস্থা
FP8safetensors8সরকারিRuntime সনদপ্রাপ্ত

প্রস্তাবিত হার্ডওয়্যার

Use only the listed transformers, vllm, sglang runtime configuration with the exact checkpoint precision. The recommendation engine checks weight memory, KV cache, runtime overhead, safety অতিরিক্ত সক্ষমতার অবকাশ, GPU architecture and topology before ranking rentable and reference hardware.

Weight-এর আনুমানিক memory23.02 GB
KV cache0.63 GB
চালনার অতিরিক্ত সম্পদব্যয়8.98 GB
নিরাপত্তা মার্জিনসহ মোট40.45 GB

সেরা মূল্য-সুবিধার প্রস্তাব

1× NVIDIA H200 SXM 141GB

141 GB মোট VRAM · nvswitch

100.55 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ২,৩৪৫ / মাস

সর্বনিম্ন ব্যয়ের কার্যকর বিকল্প

1× NVIDIA H100 PCIe 80GB

80 GB মোট VRAM · pcie

39.55 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ১,৫৭৯ / মাস

সর্বোচ্চ কর্মক্ষমতা

1× NVIDIA H200 SXM 141GB

141 GB মোট VRAM · nvswitch

100.55 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ২,৩৪৫ / মাস

লাইসেন্স ও নিজস্ব অবকাঠামোয় চালানোর বিবেচনা

The full 24B resident weight set must fit across the selected GPUs. Context and concurrency add KV-cache memory; MoE active parameters do not replace resident-weight memory.

Devstral Small 2 24B is published under Apache 2.0. The release-scoped official license link and verification date are retained with the catalogue record.

বাণিজ্যিক ব্যবহার অনুমোদিত. সরকারি লাইসেন্সে বাণিজ্যিক ব্যবহারের অনুমতি আছে; লাইসেন্সের শর্তগুলো তবুও প্রযোজ্য।

বিকল্প ও একই প্রজন্মের variant

Devstral 2 123B Instruct 2512

Release-এর সময়রেখা

mistral-ai/mistral/devstral-small-2-24b

উৎসের বিবরণ

সরকারি উৎস

উৎস revision: 3c894e9887e10a0e048cf6875d183a2387181ad333678430fdd8e5ab537b889c

সাধারণ জিজ্ঞাসা

How much VRAM does Devstral Small 2 24B require?

The exact estimate depends on checkpoint precision, context and concurrency; the page recommendation uses the certified memory engine and compatible runtime configurations.

Which runtime সহায়তা Devstral Small 2 24B?

Certified upstream runtime evidence is available for transformers, vllm, sglang.

Can Devstral Small 2 24B be used commercially?

The stored commercial classification is Commercial Use Allowed. Consult the official Apache 2.0 terms for the final obligations.

সরকারি তথ্যসূত্র

সর্বশেষ যাচাই: 2026-08-26