H200 141GB SXM5 的显存带宽高约 525%(4,800 对 768 GB/s)。batch-1 解码与带宽强相关,因此同能装下的模型在 H200 141GB SXM5 上解码约快 525%。 Q4/8K 下 H200 141GB SXM5 能装下的目录模型更多——63 个模型中 49 对 35(141 对 48 GB VRAM)。 能装进 H200 141GB SXM5 却装不进 RTX A6000 48GB 的最大模型:MiniMax-M2.7(228.7B)。 MSRP:RTX A6000 48GB 为 $4,500,H200 141GB SXM5 为 $35,000。MSRP 是发布标价而非实时售价——Amazon 价格会波动,点进去才是在售价格。 不可零售购买:H200 141GB SXM5(数据中心级;现实使用方式是云租赁)。 下方 Q4/8K 正面对比(52 个共有模型)中,H200 141GB SXM5 在 52 行 tok/s 更高,0 行落后。 方法论.
规格对比
| RTX A6000 48GB | H200 141GB SXM5 |
| 厂商 | NVIDIA | NVIDIA |
| VRAM | 48 GB | 141 GB |
| 显存类型 | GDDR6 | HBM3e |
| 显存带宽 | 768 GB/s | 4,800 GB/s |
| TDP | 300 W | 700 W |
| MSRP(标价) | $4,500 | $35,000 |
| 购买 | 搜索 Amazon (返利链接) | — |
MSRP 为发布标价,非实时售价。购买链接为 Amazon 返利链接——点击后看到的才是在售价格。
Q4 / 8K 正面对比——52 个共有模型中的前 15 个
估算 = 基于带宽的估算;实测 = 收录的真实基准,覆盖估算值。装得下 = 权重 + KV(8K) + 1 GB 开销 ≤ 95% VRAM。
Q4 / 8K 装机覆盖
| RTX A6000 48GB | H200 141GB SXM5 |
| 装得下的目录模型 | 63 个中 35 个 | 63 个中 49 个 |
| 独占装下的最大模型 | — | MiniMax-M2.7 (228.7B) |
RTX A6000 48GB 详情 → ·
H200 141GB SXM5 详情 →