跳到主要内容

AMD MI355X vs NVIDIA H200

对比厂商公布的规格与当前可租用库存。

差异仅来自经验证的内存、带宽、功耗、形态、精度、软件与真实库存。

字段AMD Instinct MI355X 288GBNVIDIA H200 SXM 141GB
制造商AMDNVIDIA
精确 SKUMI355XH200 SXM
架构CDNA 4Hopper
代际InstinctHopper
类别数据中心数据中心
生命周期当前当前
VRAM288 GB141 GB
内存技术HBM3EHBM3e
带宽8,000 GB/s4,800 GB/s
功耗1400 W700 W
接口AMD 平台接口PCIe Gen5 主机接口
形态AMD · 加速器 · 模块SXM · 模块
互连Infinity FabricNVLink
MIG / 分区未列为支持支持
AI 数值精度格式FP64, FP32, BF16, FP16, FP8, FP6, FP4, INT8FP64, FP32, TF32, BF16, FP16, FP8, INT8
运行时生态rocm, vllmcuda, vllm, sglang, tensorrt-llm
租赁可用性仅供参考容量有限
月租价格仅供参考USD 2,345

已验证差异

  • AMD Instinct MI355X 288GB 在本次选择中拥有最大 VRAM。
  • AMD Instinct MI355X 288GB 拥有最高记录内存带宽。
  • NVIDIA H200 SXM 141GB 的公布功耗最低。

架构差异

经来源验证的事实:AMD Instinct MI355X 288GB: CDNA 4 / Instinct / AMD · 加速器 · 模块 · NVIDIA H200 SXM 141GB: Hopper / Hopper / SXM · 模块

VRAM 与内存需求

经来源验证的事实:AMD Instinct MI355X 288GB: 288 GB / HBM3E / 8,000 GB/s · NVIDIA H200 SXM 141GB: 141 GB / HBM3e / 4,800 GB/s

功耗与散热

经来源验证的事实:AMD Instinct MI355X 288GB: 1400 W / AMD · 加速器 · 模块 · NVIDIA H200 SXM 141GB: 700 W / SXM · 模块

AI 精度支持

经来源验证的事实:AMD Instinct MI355X 288GB: FP64, FP32, BF16, FP16, FP8, FP6, FP4, INT8 · NVIDIA H200 SXM 141GB: FP64, FP32, TF32, BF16, FP16, FP8, INT8

接口与互连

经来源验证的事实:AMD Instinct MI355X 288GB: AMD 平台接口 / Infinity Fabric · NVIDIA H200 SXM 141GB: PCIe Gen5 主机接口 / NVLink

多 GPU 注意事项

大型模型可能需要并行执行或多个节点。确定 GPU 数量前,应核对模型驻留内存、运行环境、互连方式、拓扑结构和容量余量。

模型与工作负载适配

适用性取决于模型版本、精度、运行环境、可用内存和拓扑结构。技术兼容并不代表存在可租用资源。

租赁可用性

经来源验证的事实:AMD Instinct MI355X 288GB: 仅供参考 · NVIDIA H200 SXM 141GB: 容量有限 / USD 2,345 / 月

官方来源

最近验证: 2026-08-25