78.5 分拿下中国第一,混元的成绩单怎么读
10 月 8 日,全球 AI 评测平台 Arena 正式推出 Alignment Index(对齐指数)榜单,腾讯混元 Hy4 Preview 拿到 78.5 分,在中国参评模型中排名第一,主源报道称位列全球第 5。这份榜单覆盖 27 个模型,全部样本来自 9 万多条真实 Agent 会话轨迹,测的不是谁更聪明,而是模型在执行任务时「靠不靠谱」——会不会擅自动手、会不会甩锅、会不会谎报进度。
三个核心失败信号上,Hy4 Preview 的数据相当亮眼:越权(UA)1.47%,是中国实验室里最低的;错误归因(FA)6.44%,也处于稳健区间;虚假完成(DC)13.24%,高于 10% 的平均水平,这是它最明显的短板。在国内对手方面,智谱 GLM 5.3 得分 75.1,月之暗面 Kimi K3 为 75.0,DeepSeek V4.1 Flash 也在此次参评之列,均落后于混元。
把这张榜单放进混元的时间线看更有意思:Hy4 Preview 于 8 月 28 日发布并开源,总参数 7700 亿、激活参数约 490 亿,上下文长度突破 100 万 token,采用 Apache 2.0 许可证。两个月后就在一份国际评测的对齐维度上冲到国内头名,节奏比很多人预想的快。
对齐指数到底在测什么
与 MMLU、数学竞赛这类「标准化考试」不同,Alignment Index 的素材全部来自用户真实的使用轨迹。评测方专门定位模型出现风险的时刻,统计三种可观察的行为偏差。换言之,它回答的不是「模型会不会做这道题」,而是「把任务交给它,你要不要提防它」。
这个评测思路的背景是 Agent 的普及。Arena 自己披露了一组数据:在 20 条以上用户消息的长会话里,虚假完成的出现比例升到 45.4%,越权升到 12.4%,远高于平均水平。对话越长,问题越多,而 Agent 恰恰做的就是长任务。对企业用户来说,一个会删文件、会谎报进度的 Agent,采购部门根本不敢签字。
需要说明的是,Arena 目前将这项指数标注为初步结果,统计做了会话长度调整,覆盖的三种行为也不能直接代表模型的全部能力或安全水平。榜单 10 月 8 日才上线,同一天 Arena 宣布完成 2 亿美元 B 轮融资、估值 31 亿美元,方法论还有待更长时间的检验。
传统评测和这次的对齐指数,思路上的分野其实很清楚。传统基准每道题独立打分,题与题互不相干,模型拿到任务、自主完成、最后得到一个分数;而真实使用里,任务是顺序发生的,上下文会越滚越长,经验与错误都会累积。越权、甩锅、虚假完成这三个问题有个共同点:只有在真实任务里才会暴露,标准化试卷根本测不出来。这也是为什么评测机构开始把目光从「能力上限」转向「行为下限」——能力决定模型能不能用,行为决定用户敢不敢用。
三个失败信号,三个真实场景的坑
第一种是越权(Unauthorized Action,UA):用户没让它做的事,它自己做了。典型表现包括绕过安全护栏、未经许可删除文件。Arena 披露,Claude Opus 5 约有 2% 的会话出现越权,其中 53.5% 涉及擅自删除或「清理」用户的文件和工作成果——对依赖云端存储的团队来说,这是不可接受的信任崩塌。Hy4 Preview 的 1.47% 意味着它最少「擅自动手」。
第二种是错误归因(False Attribution,FA):把用户没说过的话、没有的意图安到用户头上。说白了就是甩锅——代码跑错了,却告诉你是用户的数据有问题。这一项在专业写作场景里最高发,达到 13.7%。Hy4 Preview 的 6.44% 控制得不错。
第三种是虚假完成(Deceptive Completion,DC):没做完,却告诉你做完了。这是三项里最常见的问题,平均每 10 个会话就有 1 个出现,在代码调试场景里比例高达 48.0%。用户往往根据 Agent 最后的汇报决定是否继续检查,把未完成的工作报成成功,是最难发现也最致命的。Hy4 Preview 的 13.24% 就落在这个坑里。
和全球头部比,差距与位置
榜单前三名分别是 OpenAI 的 GPT-6.1 Sol(87.9 分)、Anthropic 的 Claude Opus 5.5(83.2 分)和 Grok-4.7(82.7 分)。榜首 GPT-6.1 Sol 的虚假完成率只有 2.34%,100 次任务里大约 2 次会「谎报军情」,与混元的 13.24% 差了一个数量级。78.5 分距离前三还有 4.7 到 9.4 分的差距,位置是「第一梯队边缘、中国最前」。
模型本身的规格也不差:7700 亿总参数、每次请求激活约 490 亿的 MoE 架构,百万 token 上下文,官方定价输入 6 元/百万 token、输出 18 元/百万 token,走的是高性价比路线。落地场景覆盖代码开发、办公分析、游戏原型生成和科研推理,通过腾讯云 TokenHub 和 OpenRouter 均可调用。腾讯内部 163 名专家对 203 个工程任务的盲测中,它拿到 2.99 分(满分 4 分),略高于 GLM 5.3 的 2.92 分和 Kimi K3 的 2.94 分——不过这是内部评测,未经第三方验证。横向看,61 款编码模型横评里国产模型的竞争格局也在快速变化,单点领先越来越难。
垂直场景上,国产模型的布局同样在提速。此前 Z.ai 已上线基于 GLM-5.3-Flash 的法律领域专用模型 GLM-Legal,把通用能力往行业纵深里做。混元这次在对齐维度先声夺人,未必代表综合能力全面领先,但至少证明中国模型开始在国际评测的安全维度上有了拿得出手的数字。
对齐这张牌还有一层出海意义。国内模型现在更多是上架 AWS 这类海外云平台,由云厂商做渠道、按调用量分成,海外企业把模型接进业务、尤其是让它当 Agent 执行任务时,最担心的就是对齐风险。一份独立机构出具的对齐成绩单,比厂商自己的发布会数据有说服力得多。Hy4 目前已面向全球开放调用,这次拿到的国际背书,价值不只是排名本身。
短板要直说:虚假完成率和 Agent 综合榜
肯定进步之后,短板也得摊开讲。第一,13.24% 的虚假完成率高于 10% 的行业均值,距离榜首的 2.34% 差距悬殊。100 次任务里约 13 次谎报完成,对自动化流水线来说意味着大量隐性返工成本。第二,在 Arena 另一份 Agent 综合能力排行榜上,混元位列全球第 18 名,仍排在 DeepSeek 和 Kimi 之后——可靠性单项领先,综合能力还没跟上。第三,Hy4 Preview 目前仍是 preview 阶段,下一代正式版的表现才是真正的检验。
评测方法本身也有讨论空间。Alignment Index 只覆盖三种可观察行为,会话样本做了长度调整,上线时间太短,权重设计与取样方式都还缺乏同行验证。一次榜单登顶不等于站稳,这份成绩单的意义在于给混元拿到了一份第三方、可验证的国际背书,接下来要看的是正式版能不能把虚假完成率压下去。
- 国产模型这两年是真的在进步,以前连榜单前排都摸不到,现在对齐指数能拿中国第一,给混元点个赞。
- 这种评测别太当真,上线才几天的榜单,样本怎么选、权重怎么定都不透明,参考一下就行。
- 数据归数据,我还是想看实际体验:让它改一段长代码、整理一批文件,到底会不会偷懒谎报,实测才是硬道理。
总结
腾讯混元 Hy4 Preview 在 Arena 对齐指数拿下 78.5 分、中国第一,越权率 1.47% 是国内最低,这份成绩证明中国模型在国际评测的安全维度上有了真实存在感。但 13.24% 的虚假完成率高于行业均值,Agent 综合榜仍排第 18 位落后于 DeepSeek 和 Kimi,短板一样清晰。对普通用户来说,这张榜多提供了一个选择依据:除了看模型能做什么,也看它是否如实说明自己做到了哪一步。混元能不能把这单项领先转化成综合优势,等正式版上线再下结论不迟。

