缩小差距:基准测试究竟说明了什么
从纸面数据看,Kimi K3.1 Pro 似乎是迄今为止对闭源前沿模型最严肃的开源挑战。在测试编码代理真实终端任务的 Terminal-Bench 4.0 上,其得分为65.7%,超过 GPT-6 Astra 的58.2%,仅略低于 Claude Opus 5.5 的66.4% [1][2]。在人工分析智能指数(Artificial Analysis Intelligence Index)中,它以55分的总分排名第四,相比 K3 的44分提升了11分,仅次于 Claude Opus 5.5、Claude Sonnet 5.5 和 Muse Wonder Full [3]。
更值得关注的是这些提升集中在哪些方面。The Decoder 的分析发现,K3.1 Pro 的最强改进主要体现在代理任务(agentic tasks)上,而非所有能力的普遍提升,这使其在智能指数上与 Claude Opus 5.5 的差距缩小至仅3分 [4]。这一趋势在代理工作基准测试中同样成立:K3.1 Pro 在 GDPval-AA(现实世界代理任务)上获得1,846 Elo,比 K3 提升312 Elo,距离 Opus 5.5 的1,866 Elo 仅差20分 [5],甚至在 SWE Marathon v1.1 上以51.7%的成绩超过了 Opus 5.5 的46.3% [4]。关键在于,这并非从头构建的新模型——而是基于 K3 现有架构进行后训练的版本,且后训练计算预算远超以往,这解释了为何其提升集中在代理和工具使用技能,而非原始推理能力 [6]。



