月之暗面(Moonshot AI)于今日在Hugging Face平台正式发布其最新一代开源模型Kimi K3。该模型拥有2.8万亿(2.8T)参数,是公司迄今最强大的模型,也是全球首个开源3T级模型。Kimi K3定位为原生多模态智能体模型,支持文本、图像与视频理解,并具备100万token的超长上下文窗口,旨在推动前沿智能在长时编码、知识工作与复杂推理等领域的应用。

Kimi K3在架构上采用了多项创新。它基于Kimi Delta Attention(KDA)Attention Residuals(AttnRes)构建,并引入Stable LatentMoE框架,将MoE稀疏性扩展至896个专家中激活16个,相比前代Kimi K2,整体扩展效率提升约2.5倍。模型总参数量2.8T,激活参数为104B,包含93层网络,其中69层采用KDA、24层采用Gated MLA注意力。视觉编码器采用MoonViT-V2,参数规模401M。量化方面,Kimi K3采用MXFP4权重与MXFP8激活的量化感知训练。

在性能表现上,Kimi K3在多项基准测试中展现出竞争力。在推理与知识类任务中,其GPQA Diamond得分93.5,HLE-Full(无工具/有工具)得分43.5/56.0。在编码任务中,Kimi K3在SWE-Marathon上取得42.0分,显著领先于对比模型(如Claude Fable 5的35.0、GPT-5.5的14.0),但在DeepSWE上得分67.5,略低于Claude Fable 5的70.0。在智能体任务中,其BrowseComp得分91.2MCPMark-Verified得分94.5,均优于多数对比模型。视觉理解方面,OmniDocBench得分91.1Video-MME(带字幕)得分90.0,表现突出。所有Kimi K3结果均在推理强度设为'max'、温度1.0的条件下取得。

Kimi K3的发布标志着开源模型在规模与能力上迈入新阶段。其2.8T参数规模与100万token上下文的组合,为长时程编码、复杂知识工作等场景提供了新的可能性。模型权重以Kimi K3 License完全开放,允许研究、部署与进一步创新,这将吸引开发者与研究者基于其构建应用,可能推动AI应用生态的繁荣。

从产业视角看,Kimi K3的发布加剧了开源与闭源模型的竞争。其在部分基准上超越或接近主流闭源模型(如GPT-5.6 Sol、Claude Opus 4.8),尤其在SWE-MarathonMCPMark等智能体相关任务上优势明显,显示出开源模型在特定领域已具备领先实力。然而,在CritPt(23.4 vs 28.6)与DeepSWE(67.5 vs 70.0)等任务上,Kimi K3仍与顶尖闭源模型存在差距,表明推理深度与复杂工程任务上仍有提升空间。

对于AI产业链而言,Kimi K3的开源策略可能降低前沿模型的使用门槛,推动下游应用创新,尤其在需要长上下文与多模态能力的场景(如自动化编程、深度研究、视频编辑等)。同时,其2.8T参数规模与104B激活参数的设计,对推理基础设施的算力与内存提出更高要求,可能带动相关硬件与云服务需求。整体来看,Kimi K3的发布是开源大模型领域的一个重要里程碑,其实际表现与生态发展值得持续关注。