RTX 3090 24GB 的显存带宽高约 680%(936 对 120 GB/s)。batch-1 解码与带宽强相关,因此同能装下的模型在 RTX 3090 24GB 上解码约快 680%。 Q4/8K 下 Mac mini M4 32GB 能装下的目录模型更多——63 个模型中 34 对 30(32 对 24 GB VRAM)。 能装进 Mac mini M4 32GB 却装不进 RTX 3090 24GB 的最大模型:Qwen2.5-32B-Instruct(32.8B)。 MSRP:Mac mini M4 32GB 为 $999,RTX 3090 24GB 为 $1,499。MSRP 是发布标价而非实时售价——Amazon 价格会波动,点进去才是在售价格。 下方 Q4/8K 正面对比(46 个共有模型)中,RTX 3090 24GB 在 46 行 tok/s 更高,0 行落后。 方法论.
| Mac mini M4 32GB | RTX 3090 24GB | |
|---|---|---|
| 厂商 | Apple | NVIDIA |
| VRAM | 32 GB | 24 GB |
| 显存类型 | LPDDR5X | GDDR6X |
| 显存带宽 | 120 GB/s | 936 GB/s |
| TDP | 155 W | 350 W |
| MSRP(标价) | $999 | $1,499 |
| 购买 | 搜索 Amazon (返利链接) | MSI GeForce RTX 3090 Ventus 3X 24G OC (返利链接) · 更多商品 |
| 模型 | 参数 (B) | Mac mini M4 32GB tok/s | Mac mini M4 32GB 装得下 | RTX 3090 24GB tok/s | RTX 3090 24GB 装得下 | 胜者 |
|---|---|---|---|---|---|---|
| MiniCPM5-1B | 1.08 | 70.7 估算 | 是 | 551.5 估算 | 是 | RTX 3090 24GB |
| Qwen3.5-2B | 2.0 | 38.2 估算 | 是 | 297.8 估算 | 是 | RTX 3090 24GB |
| GLM-4.7-Flash | 31.2 | 25.5 估算 | 是 | 198.5 估算 | 是 | RTX 3090 24GB |
| Qwen3-30B-A3B-Instruct-2507 | 30.5 | 25.5 估算 | 是 | 198.5 估算 | 是 | RTX 3090 24GB |
| Qwen3.5-35B-A3B | 34.7 | 25.5 估算 | 是 | 198.5 估算 | 是 | RTX 3090 24GB |
| Qwen3.6-35B-A3B | 36.0 | 25.5 估算 | 是 | 198.5 估算 | 是 | RTX 3090 24GB |
| Nemotron-3-Nano-Omni-30B-A3B-Reasoning-BF16 | 30.0 | 25.5 估算 | 是 | 198.5 估算 | 是 | RTX 3090 24GB |
| Ornith-1.0-35B | 35.0 | 25.5 估算 | 是 | 198.5 估算 | 是 | RTX 3090 24GB |
| Llama-3.2-3B-Instruct | 3.2 | 41.3 实测 | 是 | 186.1 估算 | 是 | RTX 3090 24GB |
| gpt-oss-20b | 21.5 | 21.2 估算 | 是 | 161.8 实测 | 是 | RTX 3090 24GB |
| Qwen3-Coder-Next | 79.7 | 36.1 估算 | 否 | 158.2 估算 | 否 | RTX 3090 24GB |
| gemma-4-26B-A4B-it | 25.2 | 20.1 估算 | 是 | 156.7 估算 | 是 | RTX 3090 24GB |
| Qwen3-Next-80B-A3B-Instruct | 81.3 | 34.7 估算 | 否 | 152.3 估算 | 否 | RTX 3090 24GB |
| Qwen3-4B-Instruct-2507 | 4.0 | 19.1 估算 | 是 | 148.9 估算 | 是 | RTX 3090 24GB |
| Qwen3-4B-Thinking-2507 | 4.0 | 19.1 估算 | 是 | 148.9 估算 | 是 | RTX 3090 24GB |
| Mac mini M4 32GB | RTX 3090 24GB | |
|---|---|---|
| 装得下的目录模型 | 63 个中 34 个 | 63 个中 30 个 |
| 独占装下的最大模型 | Qwen2.5-32B-Instruct (32.8B) | — |