跳到正文
IT之家·· 17 天前精选AI 评分78

MiniMax 开源 M3.1 Flash 模型权重,总参数 428B

MiniMax M3.1 Flash 开源模型权重,总参数 428B

AI 导读

MiniMax 稀宇科技开源 MiniMax M3.1 Flash 模型权重,总参数 428B、激活参数 23B,能力较上一代 M3 全面提升。该模型通过全模型稀疏注意力、量化感知训练和 Power-aware scheduling 提升推理效率,其中路由 MoE 专家迁移到 W4A4。

推荐理由

原文给出 428B 总参数、23B 激活参数与三项推理效率优化,可据此判断开源大模型的部署门槛变化。

来源:IT之家 · ithome.com