MI300X 192GB 的显存带宽高约 562%(5,300 对 800 GB/s)。batch-1 解码与带宽强相关,因此同能装下的模型在 MI300X 192GB 上解码约快 562%。 Q4/8K 下 MI300X 192GB 能装下的目录模型更多——63 个模型中 52 对 25(192 对 20 GB VRAM)。 能装进 MI300X 192GB 却装不进 RX 7900 XT 20GB 的最大模型:MiMo-V2.5(310.0B)。 MSRP:MI300X 192GB 为 $15,000,RX 7900 XT 20GB 为 $899。MSRP 是发布标价而非实时售价——Amazon 价格会波动,点进去才是在售价格。 不可零售购买:MI300X 192GB(数据中心级;现实使用方式是云租赁)。 下方 Q4/8K 正面对比(45 个共有模型)中,MI300X 192GB 在 45 行 tok/s 更高,0 行落后。 方法论.
规格对比
| MI300X 192GB | RX 7900 XT 20GB |
| 厂商 | AMD | AMD |
| VRAM | 192 GB | 20 GB |
| 显存类型 | HBM3 | GDDR6 |
| 显存带宽 | 5,300 GB/s | 800 GB/s |
| TDP | 750 W | 315 W |
| MSRP(标价) | $15,000 | $899 |
| 购买 | — | 搜索 Amazon (返利链接) |
MSRP 为发布标价,非实时售价。购买链接为 Amazon 返利链接——点击后看到的才是在售价格。
Q4 / 8K 正面对比——45 个共有模型中的前 15 个
估算 = 基于带宽的估算;实测 = 收录的真实基准,覆盖估算值。装得下 = 权重 + KV(8K) + 1 GB 开销 ≤ 95% VRAM。
Q4 / 8K 装机覆盖
| MI300X 192GB | RX 7900 XT 20GB |
| 装得下的目录模型 | 63 个中 52 个 | 63 个中 25 个 |
| 独占装下的最大模型 | MiMo-V2.5 (310.0B) | — |
MI300X 192GB 详情 → ·
RX 7900 XT 20GB 详情 →