মূল content-এ যান

InternLM · সাধারণ · InternLM3

InternLM3 8B: বৈশিষ্ট্য, GPU প্রয়োজন, hosting ও deployment

InternLM3 8B is a legacy General release in the InternLM family, certified from its immutable official source revision.

Technical deployment reference illustration for InternLM3 8B
Reference deployment flow; exact architecture facts are listed separately.
মোট প্যারামিটার৮.০B
সক্রিয় প্যারামিটারঘন মডেল
প্রসঙ্গ-উইন্ডো১,৩১,০৭২ tokens
প্রকাশনার অবস্থাপুরোনো · পুরোনো
স্থাপত্যDense Transformer
মোডালিটিটেক্সট
লাইসেন্সApache 2.0
স্থাপনার অবস্থাসনদপ্রাপ্ত কনফিগারেশনে স্থাপনযোগ্য
বাণিজ্যিক অবস্থাবাণিজ্যিক ব্যবহার অনুমোদিত
প্রকাশের তারিখ2025-01-13

স্থাপত্য, শক্তির দিক ও ব্যবহার

InternLM3 8B is an official self-hostable Shanghai AI Laboratory release in the InternLM General track. It uses Dense Transformer, carries 8B, supports a verified context window of 131,072 টোকেন, and exposes only source-certified checkpoint and runtime combinations. Its release, license and deployment facts are tied to the official repository revision rather than inferred from the family name.

InternLM3 8B uses Dense Transformer with 8B. The stored architecture profile records 64 layers, hidden width 8192, 64 attention heads and a 131,072 টোকেন context ceiling where the official configuration publishes those fields.

Verified Dense Transformer architecture
131,072 টোকেন certified context
Official BF16, Unknown checkpoint coverage
Private LLM inference
Agentic workflows
Long-context document processing

সনদপ্রাপ্ত checkpoint ও quantization

শুধু এই release-এর সঙ্গে যুক্ত নির্দিষ্ট, উৎস-সনদপ্রাপ্ত variant দেখানো হয়।

internlm3-8b-instruct

internlm/internlm3-8b-instruct

সরকারি · BF16 · safetensors

Runtime সনদপ্রাপ্ত: vLLM Transformers

Precision / quantizationফরম্যাটবিটপ্রকাশকের বিশ্বাসযোগ্যতাস্থাপনার অবস্থা
BF16safetensors16সরকারিRuntime সনদপ্রাপ্ত

প্রস্তাবিত হার্ডওয়্যার

Use only the listed vllm, transformers runtime configuration with the exact checkpoint precision. The recommendation engine checks weight memory, KV cache, runtime overhead, safety অতিরিক্ত সক্ষমতার অবকাশ, GPU architecture and topology before ranking rentable and reference hardware.

Weight-এর আনুমানিক memory15.35 GB
KV cache2 GB
চালনার অতিরিক্ত সম্পদব্যয়7.84 GB
নিরাপত্তা মার্জিনসহ মোট31.24 GB

সেরা মূল্য-সুবিধার প্রস্তাব

1× NVIDIA H200 SXM 141GB

141 GB মোট VRAM · nvswitch

109.76 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ২,৩৪৫ / মাস

সর্বনিম্ন ব্যয়ের কার্যকর বিকল্প

2× NVIDIA L4 24GB

48 GB মোট VRAM · pcie

16.76 GB অতিরিক্ত সক্ষমতা · উপলভ্য

USD ৫০০ / মাস

সর্বোচ্চ কর্মক্ষমতা

1× NVIDIA H200 SXM 141GB

141 GB মোট VRAM · nvswitch

109.76 GB অতিরিক্ত সক্ষমতা · সীমিত সক্ষমতা

USD ২,৩৪৫ / মাস

লাইসেন্স ও নিজস্ব অবকাঠামোয় চালানোর বিবেচনা

The full 8B resident weight set must fit across the selected GPUs. Context and concurrency add KV-cache memory; MoE active parameters do not replace resident-weight memory.

InternLM3 8B is published under Apache 2.0. The release-scoped official license link and verification date are retained with the catalogue record.

বাণিজ্যিক ব্যবহার অনুমোদিত. সরকারি লাইসেন্সে বাণিজ্যিক ব্যবহারের অনুমতি আছে; লাইসেন্সের শর্তগুলো তবুও প্রযোজ্য।

Release-এর সময়রেখা

internlm/internlm/internlm3-8b

উৎসের বিবরণ

সরকারি উৎস

উৎস revision: 58930c5e0f2b0b2653149106bcb51a314d82a23711fe4dabdfd5d90f3cd33cb6

সাধারণ জিজ্ঞাসা

How much VRAM does InternLM3 8B require?

The exact estimate depends on checkpoint precision, context and concurrency; the page recommendation uses the certified memory engine and compatible runtime configurations.

Which runtime সহায়তা InternLM3 8B?

Certified upstream runtime evidence is available for vllm, transformers.

Can InternLM3 8B be used commercially?

The stored commercial classification is Commercial Use Allowed. Consult the official Apache 2.0 terms for the final obligations.

সরকারি তথ্যসূত্র

সর্বশেষ যাচাই: 2026-08-26