Meta 开源 Muse Spark Open:816B 参数 MoE、百万级上下文
Meta开源816B MoE模型Muse Spark Open,支持百万token上下文,两台Mac可部署。
AI 深度解读
Meta 团队发布 Muse Spark Open 的开放权重版本,主打超长上下文、多模态输入和本地部署,关注价值在于其大规模 MoE 模型是否能以较低激活参数进入开发者环境。
- MarkTechPost 援引模型材料称,该模型总参数量为 8160 亿,每个 token 激活约 420 亿参数,并支持 100 万 token 上下文。
- 原文称模型可处理文本、图像、视频和音频,但输出形式为文本;权重提供 BF16 和 NVFP4 版本。
- 文中列出的部署方案包括两台配备 512GB 内存的 Apple M5 Ultra Mac Studio,或 Blackwell Ultra、H200 等 GPU 配置;这些属于特定量化和硬件条件下的部署描述。
- Meta 对比表显示其工具使用指标较强,但 Terminal-Bench 2.1 得分低于文中列出的部分模型,说明能力表现存在任务差异。
- 影响/看点:若模型卡、权重和部署结果能够被独立复现,其意义主要在于推动大参数 MoE 的本地化试验;但实际门槛仍取决于权重可用性、内存需求、量化损失和第三方评测。资料依据:
- MarkTechPost(2026-10-15):https://www.marktechpost.com/2026/10/15/meta-muse-spark-open-816b-open-weight-model/
- Meta Muse Spark Open 模型卡(2026-10-15):https://huggingface.co/meta-llama/Muse-Spark-Open
本内容由 AI 生成,仅供参考,请注意甄别