❯ Moonshot 开源 Kimi K3 权重与技术报告,2.8 万亿参数登顶开源模型榜首
权重落地Moonshot 7 月 27 日放出 Kimi K3 的全部模型权重与技术报告,2.8 万亿参数的混合专家架构、原生视觉理解、100 万 token 上下文,每次推理只从 896 个专家里激活 16 个——权重同步上架 HuggingFace,当天冲上趋势榜第一。评测机构 Artificial Analysis 把它列进智能指数 57 分、开源权重第一名,同时给许可证打上「商业使用受限」标签。
补齐另一半今天开源的不是模型本身。K3 七月上旬就已经在 Moonshot 自家产品和接口上跑,今天补的是权重和技术报告这一半,等于把「能调用」变成「能自建」。随权重一起放出的还有四个配套工程组件:MoE 通信库 MoonEP、Kimi Delta Attention 的 CUTLASS 实现 FlashKDA(官方称在 H20 上把预填充做到 1.72 至 2.22 倍)、支持快照与分叉的智能体环境系统 AgentENV,以及 3000 题的视觉感知基准 PerceptionBench。Fireworks、Nebius、Modal、Baseten、Together、DigitalOcean 六家推理平台同日上线托管。研究者 teortaxesTex 指出报告刻意没写训练 token 数,按公开参数推算训练算力落在 3 至 4e25 FLOPs 区间。
谁跑得动2.8 万亿参数的权重,个人开发者几乎碰不到——单是 MLA 层的键值缓存,每百万 token 就要吃掉约 12GB 显存(研究者 zephyr_z9 估算)。真正接住这份权重的是有整机柜的推理厂商和自建集群的大企业,六家 Day-0 托管方几小时内全部就位,本身就说明这轮开源的受众是谁。对企业技术选型的人来说,K3 把一个此前只有闭源模型能给的能力档位挪进了可自部署的范围,接下来要重算的是自建集群与调用接口之间的成本差。
▪ SIGNAL开源权重的门槛已经从「能不能下载」变成「有没有机柜」。