← AI Hashrate EN

Laguna S 2.1

Poolside · 118.0B(激活 8.0B) · MoE · ctx 1024K · openmdw-1.1 · HuggingFace

Laguna S 2.1(Poolside)是 AI Hashrate 收录的118.0B 参数 MoE(每 token 激活 8.0B)开放权重模型。 按 8K 上下文估算:Q4 约需 67.4 GB VRAM(权重 64.9 GB + KV 1.5 GB + 开销 1 GB),FP16 约需 238.5 GB。 在该上下文假设下,目录中约有 12 款 GPU/加速器能在 Q4 下完整装下此模型。 Q4 最快配置:B200 192GB SXM ≈ 956.7 tok/s(估算); MI300X 192GB ≈ 625.5 tok/s(估算); H200 141GB SXM5 ≈ 574.0 tok/s(估算); H100 80GB SXM5 ≈ 400.6 tok/s(估算); Gaudi 3 128GB ≈ 386.6 tok/s(估算)。 下表给出各硬件的 VRAM 装机情况与每美元 tok/s(按 MSRP 标价)。估算基于显存带宽公式;有实测时以实测为准。详见方法论页。 方法论.

42 个硬件配置——按 tok/s 排序。默认装机上下文 8K。

硬件VRAM量化tok/s装得下?tok/s/$
B200 192GB SXM192Q4956.7 估算0.024
MI300X 192GB192Q4625.5 估算0.042
H200 141GB SXM5141Q4574.0 估算0.016
H100 80GB SXM580Q4400.6 估算0.013
Gaudi 3 128GB128Q4386.6 估算0.031
B200 192GB SXM192FP16324.0 估算0.008
A100 80GB SXM480Q4243.8 估算0.016
MI300X 192GB192FP16214.6 估算0.014
RTX 6000 Ada 48GB48Q4110.5 估算0.016
H200 141GB SXM5141FP16104.8 估算0.003
L40S 48GB48Q499.5 估算0.012
MacBook Pro M4 Max 128GB128Q496.2 估算0.022
RTX 5090 32GB32Q491.7 估算0.046
RTX A6000 48GB48Q488.4 估算0.02
MacBook Pro M3 Max 128GB128Q470.5 估算0.017
Gaudi 3 128GB128FP1658.7 估算0.005
DGX Spark (GH200 480GB)480Q458.0 估算0.019
Mac Studio M3 Ultra 96GB96Q457.7 估算0.014
Mac Studio M2 Ultra 192GB192Q456.3 估算0.008
MacBook Pro M1 Max 64GB64Q446.8 估算0.012
V100 32GB SXM232Q446.0 估算0.005
Arc Pro B70 32GB32Q430.6 估算0.031
RTX 4090 24GB24Q429.0 估算0.018
RTX 4090D 24GB (China)24Q429.0 估算0.018
RTX 3090 Ti 24GB24Q429.0 估算0.015
Mac mini M4 Pro 64GB64Q427.8 估算0.013
RX 7900 XTX 24GB24Q427.6 估算0.028
RTX 3090 24GB24Q426.9 估算0.018
Ryzen AI Max+ 395 128GB96Q425.4 估算临界0.013
H100 80GB SXM580FP1623.5 估算0.001
Mac Studio M2 Ultra 192GB192FP1619.8 估算0.003
RX 7900 XT 20GB20Q416.0 估算0.018
DGX Spark (GH200 480GB)480FP1615.9 估算0.005
A100 80GB SXM480FP1614.3 估算0.001
Ryzen AI Max+ 395 64GB48Q413.9 估算0.009
Ryzen AI Max 390 64GB48Q413.9 估算0.011
MacBook Pro M1 Max 32GB32Q411.7 估算0.004
MacBook Pro M4 Max 128GB128FP165.5 估算0.001
Mac Studio M3 Ultra 96GB96FP165.1 估算0.001
MacBook Pro M3 Max 128GB128FP164.1 估算0.001
Mac mini M4 32GB32Q43.1 估算0.003
Ryzen AI Max+ 395 128GB96FP161.2 估算0.001

装机核对

12 款热门零售 GPU;上表每行的「装得下?」结论同样链接到完整装机核对页。

同族模型:Poolside

全部 Poolside 模型 →