11月5日,按照10月24日发布时给出的承诺,月之暗面(MoonshotAI)在HuggingFace平台开放了Kimi K3.1 Pro的模型权重。在Arena运营的Agent Arena智能体排行榜中,Kimi K3.1 Pro(Max)位列开放权重模型第一、全部参评模型第13位,并在工作、编程与聊天三个类别中均居开放模型首位。
Agent Arena的评测方式与传统的成对盲测不同,它从真实用户的智能体会话中提取信号,包括用户对任务的明确确认、表扬与投诉、纠正指令以及Shell命令执行错误等,再通过称为因果追踪的随机化推断方法估算各模型相对于平均水平的净改进率。Kimi K3.1 Pro此次排名基于全球用户超过1.75万次真实长周期智能体任务会话,净改进率为+5.1%,较上一代K3(Max)的+0.9%提升4.2个百分点。分项指标方面,衡量Shell命令执行可靠性的Bash Reliability从K3的-4.5%升至+7.9%,在开放模型中排名第一;反映用户满意度的Praise vs Complaint指标从+1.3%升至+7.7%;衡量模型根据用户反馈调整执行方向的Steerability指标达到+6.5%,同样居开放模型首位。
Kimi K3.1 Pro采用混合专家架构,总参数量2.8万亿,单次推理激活约1040亿参数,支持约100万Token上下文窗口。与K3相比,K3.1 Pro以K3为基座进行了大规模联合强化学习后训练,覆盖数百个下游领域,并将部分全注意力层替换为门控稀疏注意力层,以降低长上下文建模的开销。值得注意的是,开源权重的可下载与可本地运行之间存在显著距离,2.8万亿参数以BF16精度存储的权重文件约5.6TB,即使采用INT4量化也仍需约1.4TB,单机消费级显卡基本不具备部署可能。在终端智能体基准Terminal-Bench 4.0上,K3.1 Pro得分65.7%,高于GPT-6 Astra的58.2%,与Claude Opus 5.5的66.4%相差不到1个百分点。


来源:一电快讯
返回第一电动网首页 >
以上内容由AI创作,如有问题请联系admin#d1ev.com(#替换成@)沟通,AI创作内容并不代表第一电动网(www.d1ev.com)立场。
文中图片源自互联网或AI创作,如有侵权请联系邮件删除。