Kimi K3.1 Pro

如预告所示,拥有约3万亿参数级别的大型模型权重已正式公开。日本国家Moonshot AI于11月5日(中国时间)在Hugging Face平台发布了10月23日推出的AI模型“Kimi K3.1 Pro”的开源权重,采用了自有的“Kimi K3.1-Pro License”授权协议。

Kimi K3.1 Pro是一款面向编码、3D制作及金融研究等智能代理应用的大型语言模型(LLM)。该模型基于7月发布的“Kimi K3”,通过更大规模的计算资源进行后续训练。其架构采用专家混合模型(MoE),总参数量达2.8万亿,活跃参数为1040亿。模型支持100万token的上下文窗口,能够同时处理文本和图像输入。

官方推荐使用vLLM、SGLang和TokenSpeed作为推理引擎。自10月23日起,Kimi K3.1 Pro已通过Kimi.ai网站、移动端应用、桌面端应用“Kimi Work”、编码工具“Kimi Code”以及Kimi API提供服务。

相较于K3版本,K3.1 Pro将全注意力层从传统的Gated MLA替换为更高效的Gated DeepSeek Sparse Attention(Gated DSA),以支持更长上下文的建模。

在实际终端任务中,Kimi K3.1 Pro在“Terminal-Bench 4.0”编码代理测试中取得了65.7%的成绩,超过了“GPT-6 Astra”的58.2%,但略低于“Claude Opus 5.5”的66.4%。通过大规模强化学习,模型的长期编码能力也得到了提升。

该模型特别强调3D相关能力,支持与日本国家Unity、Unreal Engine、Godot等游戏引擎的集成,可用于制作前端页面、交互式Three.js场景及3D资产,且具备空间推理能力。在“BenchCAD”工具中,模型通过多视角渲染图像生成CAD代码以重建3D形状,得分为92.7%,略低于Opus 5.5(96.2%)和GPT-6 Astra(95.9%)。

为了防止模型被用于网络攻击,公开的权重经过特别处理,刻意削弱了相关能力。通过中间学习和强化学习阶段,特意剔除与网络安全相关的数据。在内部基准测试“xdev-bench-hard”中,未处理版本的攻击成功率为90.5%,而最终版本降至81.0%。Moonshot AI表示,该模型的网络攻击能力低于至少三个月前公开的主流商用模型。

关于“Kimi K3.1-Pro License”授权,用户可免费进行使用、复制、修改、再分发、销售、微调及派生模型制作,原则上支持商业用途。但若本人或关联公司通过API等方式向第三方提供模型推理或微调服务(即“Model as a Service”业务),且相关公司在任意连续12个月内总收入超过2000万美元(约合31.6亿元人民币,按1美元=约158日元换算),则需在商业使用前与Moonshot AI签订额外协议。

此外,若商业产品或服务的月活跃用户超过1亿,或月收入超过2000万美元,必须在用户界面显著位置标注“Kimi K3.1-Pro”。这些限制不适用于仅限内部使用或通过官方产品及认证推理合作伙伴使用的情况。