Llama-3.1-405B-Instruct
meta-llama/Llama-3.1-405B-Instruct
সরকারি · BF16 · safetensors
Runtime সনদপ্রাপ্ত: Transformers
| Precision / quantization | ফরম্যাট | বিট | প্রকাশকের বিশ্বাসযোগ্যতা | স্থাপনার অবস্থা |
|---|---|---|---|---|
| BF16 | safetensors | 16 | সরকারি | Runtime সনদপ্রাপ্ত |
Meta Llama · সাধারণ · Llama 3.1
Llama 3.1 405B: বৈশিষ্ট্য, GPU প্রয়োজন, hosting ও deployment
Llama 3.1 405B is a recent General release in the Meta Llama family, certified from its immutable official source revision.
মোট প্যারামিটার৪০৫.০B
সক্রিয় প্যারামিটারঘন মডেল
প্রসঙ্গ-উইন্ডো১,৩১,০৭২ tokens
প্রকাশনার অবস্থাসাম্প্রতিক · সাম্প্রতিক
স্থাপত্যDense Transformer
মোডালিটিটেক্সট
লাইসেন্সLlama 3.1
স্থাপনার অবস্থাসনদপ্রাপ্ত কনফিগারেশনে স্থাপনযোগ্য
বাণিজ্যিক অবস্থাশর্তসাপেক্ষে বাণিজ্যিক ব্যবহার অনুমোদিত
প্রকাশের তারিখ2024-07-16
স্থাপত্য, শক্তির দিক ও ব্যবহার
Llama 3.1 405B is an official self-hostable Meta release in the Meta Llama General track. It uses Dense Transformer, carries 405B, supports a verified context window of 131,072 টোকেন, and exposes only source-certified checkpoint and runtime combinations. Its release, license and deployment facts are tied to the official repository revision rather than inferred from the family name.
Llama 3.1 405B uses Dense Transformer with 405B. The stored architecture profile records 64 layers, hidden width 8192, 64 attention heads and a 131,072 টোকেন context ceiling where the official configuration publishes those fields.
Verified Dense Transformer architecture
131,072 টোকেন certified context
Official BF16 checkpoint coverage
Private LLM inference
Agentic workflows
Long-context document processing
সনদপ্রাপ্ত checkpoint ও quantization
শুধু এই release-এর সঙ্গে যুক্ত নির্দিষ্ট, উৎস-সনদপ্রাপ্ত variant দেখানো হয়।
প্রস্তাবিত হার্ডওয়্যার
Use only the listed transformers runtime configuration with the exact checkpoint precision. The recommendation engine checks weight memory, KV cache, runtime overhead, safety অতিরিক্ত সক্ষমতার অবকাশ, GPU architecture and topology before ranking rentable and reference hardware.
Weight-এর আনুমানিক memory777 GB
KV cache2 GB
চালনার অতিরিক্ত সম্পদব্যয়196.86 GB
নিরাপত্তা মার্জিনসহ মোট1210.07 GB
কারিগরিভাবে সামঞ্জস্যপূর্ণ reference sizing
এই নির্দিষ্ট checkpoint-এর জন্য runtime, স্থাপত্য, topology ও memory—সব শর্ত পূরণ করে এমন FusionPointAI মজুত হার্ডওয়্যার নেই। বিশ্বব্যাপী সামঞ্জস্যপূর্ণ হার্ডওয়্যার দেখতে estimator ব্যবহার করুন।
লাইসেন্স ও নিজস্ব অবকাঠামোয় চালানোর বিবেচনা
The full 405B resident weight set must fit across the selected GPUs. Context and concurrency add KV-cache memory; MoE active parameters do not replace resident-weight memory.
Llama 3.1 405B is published under Llama 3.1. The release-scoped official license link and verification date are retained with the catalogue record.
শর্তসাপেক্ষে বাণিজ্যিক ব্যবহার অনুমোদিত. বাণিজ্যিক ব্যবহার শর্তসাপেক্ষ। ডেপ্লয়মেন্টের আগে লিংক করা সরকারি শর্তগুলো পর্যালোচনা করুন।
বিকল্প ও একই প্রজন্মের variant
Llama 4 Scout 17B-16E, Llama 4 Maverick 17B-128E
Release-এর সময়রেখা
meta/llama/llama-3-1-405b
উৎসের বিবরণ
উৎস revision: ec5a654d6f9ae0f8c3e0ad5cf9d102d9937c302c51a497a7ae316cdb15dfed83
সাধারণ জিজ্ঞাসা
How much VRAM does Llama 3.1 405B require?
The exact estimate depends on checkpoint precision, context and concurrency; the page recommendation uses the certified memory engine and compatible runtime configurations.
Which runtime সহায়তা Llama 3.1 405B?
Certified upstream runtime evidence is available for transformers.
Can Llama 3.1 405B be used commercially?
The stored commercial classification is Commercial Use Allowed With Conditions. Consult the official Llama 3.1 terms for the final obligations.
সরকারি তথ্যসূত্র
সর্বশেষ যাচাই: 2026-08-26