GPU तुलना
एक ही मूल्य, इन्वेंटरी और विनिर्देश डेटा से 2-4 सार्वजनिक GPU तुलना करें।
| GPU |
NVIDIA H100 SXM 80GB |
|---|---|
| मासिक किराया | USD 1,860/माह |
| प्रति घंटा समतुल्य | ~ USD 2.55/घंटा |
| VRAM | 80 GB HBM3 |
| आर्किटेक्चर | Hopper |
| बैंडविड्थ | 3,350 GB/s |
| फॉर्म फैक्टर | SXM module |
| इंटरफ़ेस | PCIe Gen5 x16 host interface |
| TDP | 700 W |
| FP64 | 34 TFLOPS घना |
| FP64 Tensor | 67 TFLOPS घना |
| FP32 | 67 TFLOPS घना |
| TF32 | 494.5 TFLOPS घना / 989 TFLOPS स्पार्स |
| BF16 | 989.5 TFLOPS घना / 1979 TFLOPS स्पार्स |
| FP16 | 989.5 TFLOPS घना / 1979 TFLOPS स्पार्स |
| FP8 | 1979 TFLOPS घना / 3958 TFLOPS स्पार्स |
| INT8 | 1979 TOPS घना / 3958 TOPS स्पार्स |
| MIG | 7 MIG तक @ 10 GB |
| NVLink | 900 GB/s NVLink |
| उपलब्धता | उपलब्ध |
| फ्रेमवर्क | PyTorch, TensorFlow, JAX, Hugging Face, vLLM, TensorRT, ONNX Runtime, CUDA |
| मॉडल संगतता मार्गदर्शन | quantised inference के लिए अनुशंसित; context और concurrency की समीक्षा करें |
| कार्रवाई | कॉन्फ़िगर और किराये पर लें |