腾讯混元 Hy3 是 295B MoE,256K 上下文,Apache-2.0 许可。是宽松许可开放权重中最大的一档,现实的部署方式是多卡或云端。
混元(Hunyuan)是腾讯的开源权重大模型家族,目前的旗舰 Hy3 站在宽松许可开源模型的顶端:总参数 295B 的 MoE 架构,每个 token 只激活 21B 参数,原生 256K 上下文,采用 Apache-2.0 许可。前沿级的总容量、稀疏激活、超长上下文、再加上允许商用的宽松许可——这套组合让混元 Hy3 成为大尺度开源权重玩家中的社区热门。
但也要说实话:这不是一台游戏 PC 能跑的模型。仅 Q4 量化权重就占约 162 GB,这个家族面向的是多卡工作站、大内存 Mac 和云实例,而不是普通消费级台式机。下面我们拆开算 VRAM 账,聊聊现实的运行方案。
该家族目前只有一款模型,而且直接位于尺寸光谱的极端:
MoE 的效率。295B 总参数里每 token 只激活 21B,效果上接近巨型稠密模型,算力开销却接近 ~21B 级别。这种稀疏激活正是这个量级的模型能在数据中心之外跑起来的根本原因。
256K 上下文。原生 256K token 上下文,足以装下整个代码库、整本书级别的文档或超长的 Agent 会话。注意代价:KV cache 随上下文增长,跑满 256K 时缓存本身就要在 Q4 权重之上再加约 134 GB,长上下文场景显存轻松突破 300 GB。
Apache-2.0 许可。商用部署、微调、再分发均无限制。在这个尺寸档位的开源权重里,完全宽松的许可是实打实的差异化优势。
GGUF 生态。和其他热门开源家族一样,社区 GGUF 量化让 Hy3 可以在 llama.cpp 系环境中运行,显存不足时还能跨多卡切分层、或部分卸载到内存。
只有一个尺寸可选——真正的问题是你的硬件装不装得下。
如果你就是想要 MoE 模型但硬件预算有限,可以看看站内更小的 MoE 家族——混元属于这个类别里的重量级一端。
| 模型 | 参数 (B) | 上下文 (K) | Q4 (GB) | 许可 | 装机核对 |
|---|---|---|---|---|---|
| Hy3 | 295.0 | 256 | 162.25 | apache-2.0 | Mac Studio M2 Ultra 192GB |