Passer au contenu principal

NVIDIA L40S vs H100

Comparez les caractéristiques publiées avec les disponibilités de location actuelles.

Les différences proviennent uniquement de la mémoire, bande passante, puissance, format, précisions, logiciel et inventaire vérifiés.

ChampNVIDIA L40S 48GBNVIDIA H100 SXM 80GB
FabricantNVIDIANVIDIA
SKU exactL40SH100 SXM
Architecture du modèleAda LovelaceHopper
GénérationAda pour centre de donnéesHopper
CatégorieCentre de donnéesCentre de données
Cycle de vieActuelActuel
VRAM48 GB80 GB
Technologie mémoireGDDR6 ECCHBM3
Bande passante864 GB/s3 350 GB/s
Puissance350 W700 W
InterfacePCIe Gen4 x16Interface hôte PCIe Gen5
FormatDouble emplacement · PCIe · AccélérateurSXM · Module
InterconnexionPCIeNVLink
MIG / partitionnementNon indiqué comme pris en chargePris en charge
Formats de précision numériqueFP32, TF32, BF16, FP16, FP8, INT8FP64, FP32, TF32, BF16, FP16, FP8, INT8
Écosystème d’exécutioncuda, vllm, sglang, tensorrt-llmcuda, vllm, sglang, tensorrt-llm
Disponibilité à la locationDisponibleDisponible
Prix mensuel de locationUSD 506USD 1 860

Différences vérifiées

  • NVIDIA H100 SXM 80GB offre le plus de VRAM dans cette sélection.
  • NVIDIA H100 SXM 80GB offre la bande passante mémoire enregistrée la plus élevée.
  • NVIDIA L40S 48GB affiche la puissance publiée la plus basse.

Différences d’architecture

Faits vérifiés par les sources : NVIDIA L40S 48GB: Ada Lovelace / Ada pour centre de données / Double emplacement · PCIe · Accélérateur · NVIDIA H100 SXM 80GB: Hopper / Hopper / SXM · Module

VRAM et besoins mémoire

Faits vérifiés par les sources : NVIDIA L40S 48GB: 48 GB / GDDR6 ECC / 864 GB/s · NVIDIA H100 SXM 80GB: 80 GB / HBM3 / 3,350 GB/s

Puissance et refroidissement

Faits vérifiés par les sources : NVIDIA L40S 48GB: 350 W / Double emplacement · PCIe · Accélérateur · NVIDIA H100 SXM 80GB: 700 W / SXM · Module

Précisions IA

Faits vérifiés par les sources : NVIDIA L40S 48GB: FP32, TF32, BF16, FP16, FP8, INT8 · NVIDIA H100 SXM 80GB: FP64, FP32, TF32, BF16, FP16, FP8, INT8

Interface et interconnexion

Faits vérifiés par les sources : NVIDIA L40S 48GB: PCIe Gen4 x16 / PCIe · NVIDIA H100 SXM 80GB: Interface hôte PCIe Gen5 / NVLink

Considérations multi-GPU

Les grandes variantes peuvent exiger une exécution parallèle ou plusieurs nœuds. Vérifiez le poids du modèle en mémoire, l’environnement d’exécution, l’interconnexion, la topologie et la marge de capacité.

Adéquation modèles et charges

L’adéquation dépend de la version du modèle, de la précision, de l’environnement d’exécution, de la mémoire disponible et de la topologie. La compatibilité ne garantit pas la disponibilité à la location.

Disponibilité à la location

Faits vérifiés par les sources : NVIDIA L40S 48GB: Disponible / USD 506 / mois · NVIDIA H100 SXM 80GB: Disponible / USD 1 860 / mois

Sources officielles

Dernière vérification: 2026-08-25