Gaudi 3 128GB 的显存带宽高约 310%(3,276 对 800 GB/s)。batch-1 解码与带宽强相关,因此同能装下的模型在 Gaudi 3 128GB 上解码约快 310%。 Q4/8K 下 Gaudi 3 128GB 能装下的目录模型更多——63 个模型中 48 对 25(128 对 20 GB VRAM)。 能装进 Gaudi 3 128GB 却装不进 RX 7900 XT 20GB 的最大模型:Step-3.5-Flash(196.8B)。 MSRP:Gaudi 3 128GB 为 $12,500,RX 7900 XT 20GB 为 $899。MSRP 是发布标价而非实时售价——Amazon 价格会波动,点进去才是在售价格。 不可零售购买:Gaudi 3 128GB(数据中心级;现实使用方式是云租赁)。 下方 Q4/8K 正面对比(45 个共有模型)中,Gaudi 3 128GB 在 45 行 tok/s 更高,0 行落后。 方法论.
规格对比
| Gaudi 3 128GB | RX 7900 XT 20GB |
| 厂商 | Intel | AMD |
| VRAM | 128 GB | 20 GB |
| 显存类型 | HBM2e | GDDR6 |
| 显存带宽 | 3,276 GB/s | 800 GB/s |
| TDP | 600 W | 315 W |
| MSRP(标价) | $12,500 | $899 |
| 购买 | — | 搜索 Amazon (返利链接) |
MSRP 为发布标价,非实时售价。购买链接为 Amazon 返利链接——点击后看到的才是在售价格。
Q4 / 8K 正面对比——45 个共有模型中的前 15 个
估算 = 基于带宽的估算;实测 = 收录的真实基准,覆盖估算值。装得下 = 权重 + KV(8K) + 1 GB 开销 ≤ 95% VRAM。
Q4 / 8K 装机覆盖
| Gaudi 3 128GB | RX 7900 XT 20GB |
| 装得下的目录模型 | 63 个中 48 个 | 63 个中 25 个 |
| 独占装下的最大模型 | Step-3.5-Flash (196.8B) | — |
Gaudi 3 128GB 详情 → ·
RX 7900 XT 20GB 详情 →