2026-10-23 09:45
最后更新于2026-10-23 10:00
AI123

MiniMax开源M3.1 Flash大模型权重,总参数428B

10月23日,MiniMax稀宇科技宣布开源MiniMax M3.1 Flash模型权重。该模型总参数为428B,激活参数为23B,相较上一代M3模型能力全面提升。通过全模型稀疏注意力、量化感知训练和Power-aware scheduling等优化,M3.1 Flash进一步提升了推理效率。

具体优化包括:前三个全注意力层替换为稀疏注意力;路由MoE专家迁移至W4A4(共享专家除外),稀疏注意力索引器和主分支从Q8KV8迁移至Q8KV4;同时通过对计算卡功耗的精细分配,使计算卡持续维持算力高位,提升硬件效率。

M3.1 Flash于10月19日上线,72小时内真实用户处理超过100万亿Token。MiniMax宣布携手华为昇腾、平头哥、昆仑芯、摩尔线程、壁仞、海光、沐曦、天数、英伟达、AMD等海内外芯片厂商,以及Together AI、Fireworks、Nebius、Baseten、Modal、DigitalOcean等推理和云服务平台,共同推进M3.1 Flash开源首日接入。

此外,vLLM、SGLang、智源FlagOS、Hugging Face、魔搭等推理框架与开源社区也将与MiniMax一同推动模型在不同芯片、云平台和开发环境中的应用,持续拓展全球AI开源生态。

来源
  1. 2026-10-23 09:08 | IT之家:MiniMax M3.1 Flash 开源模型权重,总参数 428B
    阅读原文

    IT之家 10 月 23 日消息,MiniMax 稀宇科技今日宣布开源 MiniMax M3.1 Flash 的模型权重,总参数 428B,激活参数 23B。相较于上一代 M3 模型,M3.1 Flash 的模型能力实现了全面提升。此外,通过全模型稀疏注意力、量化感知训练和 Power-aware scheduling 等优化工作,M3.1 Flash 进一步提升了推理效率:全模型稀疏注意力:前三个全注意力层替换为稀疏注意力;QAT:路由 MoE 专家迁移到 W4A4(共享专家除外),稀疏注意力索引器和主分支从 Q8KV8 迁移到 Q8KV4;Power-aware scheduling:通过...

其他新闻

查看全部