RX 7900 XTX 24GB 的显存带宽高约 7%(960 对 900 GB/s)。batch-1 解码与带宽强相关,因此同能装下的模型在 RX 7900 XTX 24GB 上解码约快 7%。 Q4/8K 下 V100 32GB SXM2 能装下的目录模型更多——73 个模型中 43 对 41(32 对 24 GB VRAM)。 能装进 V100 32GB SXM2 却装不进 RX 7900 XTX 24GB 的最大模型:Qwen3.6-35B-A3B-FP8(36.0B)。 MSRP:RX 7900 XTX 24GB 为 $999,V100 32GB SXM2 为 $10,000。MSRP 是发布标价而非实时售价——Amazon 价格会波动,点进去才是在售价格。 不可零售购买:V100 32GB SXM2(数据中心级;现实使用方式是云租赁)。 下方 Q4/8K 正面对比(56 个共有模型)中,V100 32GB SXM2 在 53 行 tok/s 更高,3 行落后。 方法论.
| RX 7900 XTX 24GB | V100 32GB SXM2 | |
|---|---|---|
| 厂商 | AMD | NVIDIA |
| VRAM | 24 GB | 32 GB |
| 显存类型 | GDDR6 | HBM2 |
| 显存带宽 | 960 GB/s | 900 GB/s |
| TDP | 355 W | 300 W |
| MSRP(标价) | $999 | $10,000 |
| 购买 | ASRock Radeon RX 7900 XTX Phantom Gaming 24GB OC · 更多商品 · eBay · Newegg · B&H Photo | — |
| 模型 | 参数 (B) | RX 7900 XTX 24GB tok/s | RX 7900 XTX 24GB 装得下 | V100 32GB SXM2 tok/s | V100 32GB SXM2 装得下 | 胜者 |
|---|---|---|---|---|---|---|
| MiniCPM5-1B | 1.08 | 665.5 估算 | 是 | 895.6 估算 | 是 | V100 32GB SXM2 |
| Qwen3.5-2B | 2.0 | 359.4 估算 | 是 | 483.6 估算 | 是 | V100 32GB SXM2 |
| DeepSeek-R1-0528-Qwen3-8B-layer-mix-bpw-3.8-mlx | 2.3 | 312.5 估算 | 是 | 420.5 估算 | 是 | V100 32GB SXM2 |
| Qwen3.6-35B-A3B | 36.0 | 239.6 估算 | 是 | 322.4 估算 | 是 | V100 32GB SXM2 |
| Qwen3.5-35B-A3B | 34.7 | 239.6 估算 | 是 | 322.4 估算 | 是 | V100 32GB SXM2 |
| GLM-4.7-Flash | 31.2 | 239.6 估算 | 是 | 322.4 估算 | 是 | V100 32GB SXM2 |
| Qwen3-30B-A3B-Instruct-2507 | 30.5 | 239.6 估算 | 是 | 322.4 估算 | 是 | V100 32GB SXM2 |
| Nemotron-3-Nano-Omni-30B-A3B-Reasoning-BF16 | 30.0 | 239.6 估算 | 是 | 322.4 估算 | 是 | V100 32GB SXM2 |
| Ornith-1.0-35B | 35.0 | 239.6 估算 | 是 | 322.4 估算 | 是 | V100 32GB SXM2 |
| qwen35b-a3b-fable-sft-abliterated | 34.7 | 239.6 估算 | 是 | 322.4 估算 | 是 | V100 32GB SXM2 |
| Llama-3.2-3B-Instruct | 3.2 | 224.6 估算 | 是 | 302.3 估算 | 是 | V100 32GB SXM2 |
| gpt-oss-20b | 21.5 | 199.7 估算 | 是 | 268.7 估算 | 是 | V100 32GB SXM2 |
| Qwen3-Coder-Next | 79.7 | 160.9 估算 | 否 | 268.3 估算 | 否 | V100 32GB SXM2 |
| Qwen3-Next-80B-A3B-Instruct | 81.3 | 154.9 估算 | 否 | 258.2 估算 | 否 | V100 32GB SXM2 |
| gemma-4-26B-A4B-it | 25.2 | 189.2 估算 | 是 | 254.5 估算 | 是 | V100 32GB SXM2 |
| RX 7900 XTX 24GB | V100 32GB SXM2 | |
|---|---|---|
| 装得下的目录模型 | 73 个中 41 个 | 73 个中 43 个 |
| 独占装下的最大模型 | — | Qwen3.6-35B-A3B-FP8 (36.0B) |