模型来源 DEV.to

十月开源权重模型盘点:Muse Spark Open 本地跑要约 1TB 内存

Meta 在 10 月 15 日放出 816B 参数的 Muse Spark Open。同月 DeepSeek、IBM、阿里也各有新权重可下载。

要点

  • Muse Spark Open:MoE 架构,816B 参数、100 万 token 上下文,256 个专家每个 token 激活 8 个
  • 本地运行门槛:官方用两台各 512GB 统一内存的 M5 Ultra Mac Studio 跑 MLX(合计约 1TB);单卡 NVFP4 需 700GB 显存,BF16 需 2TB;下载要提交真实姓名、生日和组织申请
  • DeepSeek V4.1 Flash 1017:MIT 许可,552B 主干,读 prompt 时激活 8B、生成时激活 16B
  • Granite Switch 4.1 8B:Apache 2.0,另有 30B 版,提供多档 GGUF
  • Qwen3.8-27B:27B dense,原生 262,144 token 上下文,可扩到 100 万
  • 文中给的显存估算:下限约等于参数量(十亿)× 每权重位数 ÷ 8,再给上下文和运行时留余量
阅读原文这里是中文要点整理,数字与细节以原文为准。

评论

还没有评论,来写第一条。

更多资讯

全部