盲测登顶,不是自报家门
先说清楚这张榜单的分量。
Arena的前端代码竞技场,用的是Elo对战机制——跟国际象棋排名同一套逻辑。真实开发者提交真实编程任务,两个匿名模型各交一份答案,开发者盲选哪个更好。投票的时候,你不知道自己在给谁投票。
7月17日凌晨榜单更新:Kimi K3拿到1679分,第一。Claude Fable 5,1631分,第二。GPT-5.6 Sol,1618分,第三。智谱GLM-5.2 Max,1587分,第四。
上一代K2.6还在第18名,1515分。一代产品,跳了17个位次。
胜率比分数更说明问题
Arena披露了两两对战的平均胜率:K3是76%,Fable 5是63%,Sol是58%。
七个前端细分领域,K3拿下六个第一——品牌营销、参考图复刻、数据分析、消费产品、模拟应用、内容创作工具。唯一落后的是游戏开发,输给了Fable 5。
翻译一下:在"做个能用的网页成品"这件事上,K3的人类偏好评分暂时压过了两个最贵的闭源旗舰。
但有个前提得说清楚:K3的成绩目前标记为Preliminary(初步),累计1757次投票,少于Fable 5的2505次和Sol的2542次。样本少,排名还没完全坐稳。后续投票多了,分数可能波动。
综合分还是第三
别只看前端这一项。
Artificial Analysis的综合智能指数,K3拿57分排第三,落后Fable 5和GPT-5.6 Sol,但超过了Opus 4.8和GPT-5.5。编程几个硬基准:
- Terminal Bench 2.1:88.3(Fable 5是84.6)
- Program Bench:77.8(Fable 5是76.8)
- SWE Marathon:42(Fable 5是35)
长程编程场景,K3确实把Fable 5压住了。但综合体验,官方自己都写了:整体仍落后Fable 5和Sol。
实测:3D惊艳,速度拖后腿
上线不到24小时,X上的实测已经刷屏。三个高频测试方向:3D交互生成、前端编程、视觉设计。开发者们的评价高度一致——
- 3D和视觉生成能力最突出
- 前端UI设计水准接近Fable 5
- 编码强,但还没超过最强闭源
- 速度是最大短板
同一个场景,K3的生成时间约为Sol的两到三倍。瀑布场景跑了近半小时,视频剪辑花了快两小时。
三轮对比:Sol赢可靠,K3赢审美
界面新闻拿K3和GPT-5.6 Sol做了三轮同题对比,结论很直接:
场景一,3D迷宫游戏:Sol快、稳,是个不会出错的合格品。K3慢,但画面带像素风,火炬和墙面纹理更有设计感,可玩性更高。
场景二,杯子倒水物理仿真:K3翻车了。第一次生成,水粒子直接穿透杯壁漏出去,倒水时水从杯底流——物理仿真没做到位。提醒之后改了,但改得也慢。这轮Sol赢。
场景三,尼亚加拉瀑布全景:Sol功能完整但"敷衍",提示词要的彩虹没出现,水渲染成一大片白色粒子糊在悬崖上。K3更用心,彩虹没落下,水汽氤氲的质感更接近真实。当然,还是慢。
一句话总结:要又快又稳选Sol,要视觉辨识度选K3,但你得付出两三倍的时间。
官方坦承的三个短板
月之暗面在博文里没藏着掖着:
- 对历史思考内容敏感,中途切换模型可能导致输出质量明显下降
- 训练偏向长程高难任务,面对简单日常问题时容易"替用户做决定"
- 跟Fable 5和Sol比,用户体验仍有差距
一个让人意外的科研demo
官方展示了个案例:让K3复现计算天体物理里的I-Love-Q普适关系。这活儿通常资深研究员得干一到两周。K3用了约两小时——读了20多篇论文交叉验证,搭了完整数值计算流程,评估了300多种状态方程,还发现已发表公式里的不一致,最后生成3000多行Python代码和一个可交互的HTML仪表盘。
还有个博主用K3三轮对话做了个CS:GO×Portal克隆游戏,烧了约60万token,按API定价算才3.24美元。
怎么看
K3给人的感觉是:能力上限很高,但体验还没完全跟上。
前端编程盲测登顶是实打实的——盲测减少了品牌偏见,开发者真的在用脚投票。但速度、物理仿真的一次性准确率、还有那个Preliminary标记,都在提醒你别急着下结论。
7月27号权重放出来那天,才是真正的检验。现在这些分,多少带了点"新模型新鲜感红利"。
