Kimi K3.1 Pro 权重已开放:1040 亿激活参数不等于完整存储量
Kimi K3.1 Pro 的权重现在可以获取了,但看到“每次激活 1040 亿参数”,别直接按 1040 亿参数模型估算完整部署空间。它的总参数规模要大得多。
月之暗面在 10 月推出 Kimi K3.1 Pro,11 月初开放了权重。模型卡列出的架构是混合专家:总参数约 2.8 万亿,每个 token 激活约 1040 亿;支持文本和图像输入,标称上下文长度为 1,048,576 tokens。发布的权重采用 MXFP4,激活采用 MXFP8。
为什么激活量和存储量差这么多?可以把专家理解成按输入选择参与计算的不同分支:一个 token 不必运行所有专家,但不同输入可能选到不同专家。常规完整部署仍要为整套权重准备存储或分布式加载方案,还要考虑运行时缓存和通信开销。当前官方文件库总量约 1.56 TB,权重分为 96 个分片;这不是“只需 1.56 TB 显存就能在任何配置下运行”的保证。
部署方式也要看实际硬件和软件组合。AMD 披露过使用 8 张 MI355X 运行该模型的方案,这是特定厂商的配置实例,不是官方给出的通用最低门槛。模型卡列出 vLLM、SGLang 等推理引擎;不同版本、上下文长度、并发量和量化方案的内存需求都可能不同。这里没有下载完整权重或实测速度。
许可也值得先看:它使用自己的 Kimi K3.1-Pro License,不等同于无条件的通用开源许可。比如,条款对经营模型即服务业务且满足特定营收门槛的使用者要求另行签约;达到特定用户规模或月营收的商业产品还有界面标示要求,同时列出了内部使用等例外。是否适用于自己的业务,需要按完整条款判断,尤其别只看“权重开放”四个字。