Kimi K3.1 Pro 自称接近最强闭源模型,开源权重却要等到11月4日

10月24日凌晨,月之暗面发布 Kimi K3.1 Pro。发布信息里最显眼的说法是“综合智能水平已接近全球领先的闭源模型”“价格仅为 GPT 6 Astra 的五分之一”“在代码、智能体和知识类基准上达到或接近最强闭源模型”。这些话都出自发布方。同一份信息里还有一句容易被忽略的话:完整模型权重将于11月4日前发布。

把这两部分放在一起看,这次发布究竟是什么就清楚了:能当场确认的是规格和时间表,还有待兑现的是水平和价格。而后者,需要等权重放出来才会有外部答案。

三件眼下就能核实的事

一是参数规模为3万亿级,二是支持100万词元上下文窗口;发布方称它继续是全球参数规模最大的开源模型。这个头衔不需要跑分,只要权重和配置文件公开,就能核对。三是时间表:10月24日发布,11月4日前放出完整权重。从发布到可下载之间隔着十一天左右,这段时间里,包括想做安全评估的第三方在内,谁都拿不到模型本体。

“智能指数第4”含多少信息

据《北京日报》报道,在 Artificial Analysis 的智能指数中,Kimi K3.1 Pro 排名第4,位居全球开源模型之首。这是我能查到的唯一来自第三方、而非发布方的性能说法,因此它比“接近最强闭源”更有分量。

但报道只给了名次,没有列出各分项得分、测试集构成和测评方法。一个聚合指数的第4名,能说明的是在这一套题目和加权方式下它位于前列,并不能说明代码、Agent、长文本、工具调用每一项都排在同样位置。榜单只能指出它在同类中的大致位置,具体强弱还得看分项。

11.2秒和36处错误能说明什么

发布稿里最具体的一段,是一次内部长程编码测试:研发人员让模型搭建模拟人体行走系统,通过持续分析实验结果、定位问题、迭代优化行走控制器,让仿真人体从最初几步之内倒地,进步到能够交替迈步、连续行走11.2秒;其间修正了肩部肌肉力臂计算中的36处错误,随后重新训练控制器。

数字很硬,但它是内部测试,不是公开基准:没有对照组,没有其他模型跑同一任务的成绩,也没有说明多少次尝试里成功了几次。所以我更愿意把它当成对工作方式的描述:模型能在一个闭环里反复试错、自己找问题、改完再跑。它并不是对工程能力的测量。真实世界里的人形机器人要处理传感器噪声、电机延迟和地面摩擦,这些都和仿真环境里的一具骨架不是一回事。

这两个数字的关系也值得留意:11.2秒是结果,36处错误是过程,而后者才是这套方法真正想展示的东西。

价格与基准,目前仍是单方口径

“价格仅为 GPT 6 Astra 的五分之一”是典型的对标说法,但发布稿没有交代比价标准:按每百万词元输入还是输出算,是否计入缓存或批处理折扣,拿对方的哪个档位来比。缺了这些,五分之一只能当成一个数量级上的印象。

Office QA Pro v2 和 SpreadsheetBench v2 两项“全球最佳、超过 Opus 5.5、Fable 5.1 和 GPT 6 Astra”的成绩,同样出自发布方;这两个基准本身有公开题目,但在权重放出前,别人也没法把模型拉上去重跑一遍。

训练侧的说法是大幅增加强化学习环节的算力投入,让模型在数百个领域反复训练;工程侧则由负责人概括为对训练框架、推理效率、调度系统“每一层都做了优化”。原文没有给出任何一层的具体手段或效率数字,这话听着挺实在,但无法核对。

安全侧也一样。团队对模型的漏洞研究能力做了专项评估,并在训练中实施针对性控制,在降低滥用风险的同时保留通用能力。但评估方法、判定阈值、控制措施分别是什么,都没有披露。能力越强的模型越需要这套东西,也就越需要外部能看见它。

现在该怎么用这些数字

这次发布真正可核实的,是参数规模、上下文长度和一张权重时间表;可查但不完整的,是一个第三方榜单的第4名;其余关于水平的判断,都还在发布方口径里。

所以“开源最强”这个标签,眼下只能算一个有依据的预期,不是结论。11月4日之后,开发者可以自己复现,第三方可以独立评测,安全研究者可以自己动手检查;从那天起,这次发布才开始被真正检验。在那之前,把11.2秒和36处错误当作方向性的信号,比当作成绩单要稳妥得多。