news 2026/10/23 22:42:37

GLM-4.6 诚信评级 fail 主榜 18.25 分 材料约束仅 10.00

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
GLM-4.6 诚信评级 fail 主榜 18.25 分 材料约束仅 10.00

GLM-4.6 在 2026-10-23 Run#392 Smoke 快测中主榜得分 18.25 分,代码执行 25.00 分,材料约束 10.00 分,诚信评级 fail,探针得分 0.00。

分数结构显示材料约束严重拖累

主榜仅由代码执行与材料约束两个维度构成,GLM-4.6 两项得分分别为 25.00 分和 10.00 分,差值 15 分。材料约束维度考察模型是否严格基于给定长文档回答并正确引用,10.00 分表明该模型在多数题目中未能控制引用范围或出现引用错误。

同日豆包 Pro、DeepSeek V4 Pro、Gemini 3.1 Pro、Claude Opus 4.7 探针得分均为 100.00 分,GPT-o3 与 GPT-6 Sol 均为 90.00 分,GPT-6.1 Sol、GPT-6 Astra、Claude Sonnet 4.6、GPT-6 Luna 均为 80.00 分。GLM-4.6 是唯一触发 fail 的模型。

诚信探针触发机制分析

诚信评级使用 42 个金丝雀探针检测模型是否将虚构实体当作真实引用。GLM-4.6 探针得分 0.00 分,说明其在回答中直接把探针中的虚构来源当作真实文献或数据来源引用。该信号与题目难度无关,独立于代码执行和材料约束维度。

材料约束 10.00 分与诚信 fail 同时出现,表明模型在需要严格引用给定材料时,既未能忠实于材料,也额外编造了外部来源。代码执行 25.00 分相对较高,显示模型在 Python 沙箱运行代码的通过率上仍有一定基础。

对使用者的具体影响

依赖材料忠实度的场景如合同审查、政策解读、学术引用核验,GLM-4.6 的 10.00 分材料约束分数意味着输出中出现引用偏差或遗漏的概率显著上升。重代码执行的团队在简单脚本验证任务中可能仍能获得 25.00 分的通过率,但一旦任务涉及长文档核对,整体可用性会快速下降。

企业选型时,若工作流包含“引用来源必须可追溯”这一硬性要求,GLM-4.6 当前的诚信 fail 记录会直接提高人工复核成本。开发者若已将该模型接入 RAG 系统,需额外增加来源校验层以过滤虚构引用。

战略判断

GLM-4.6 在 2026-10-23 的表现显示,材料约束与诚信两个维度同时出现问题,且材料约束得分远低于代码执行。历史记录中 2026-10-17 曾出现 warn(探针 40.00),2026-10-23 转为 fail,需持续观察后续 run 是否再次触发探针。

同日其余模型全部 pass,GLM-4.6 的 0.00 探针得分构成明显孤立信号。对于需要高材料忠实度的应用,该模型当前得分结构不支持直接上线使用。

数据来源:赢政指数 (YZ Index) | Run #392

本文首发于赢政天下,获取更多深度技术内容与资源,欢迎访问官网。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/10/23 22:15:58

韩国电子烟技术创新与监管挑战分析

1. 韩国电子烟市场现状与核心矛盾韩国作为全球电子烟渗透率最高的市场之一,其发展轨迹呈现出典型的"技术驱动-监管跟进-用户适应"三角关系。2023年数据显示,韩国成年吸烟者中电子烟使用率已达32.5%,远超全球15%的平均水平。这种爆发…

作者头像 李华
网站建设 2026/10/23 22:05:30

企业微信 Webhook 接入 OpenAI / Claude API,打造群内 AI 助手

群里接 AI 助手,和单聊最大的区别是:群里人多嘴杂,AI 不能见话就接,得知道什么时候该开口,什么时候该闭嘴。 先定规矩:AI 在群里什么时候说话 被 的时候:群里有人 机器人,这是明…

作者头像 李华
网站建设 2026/10/23 21:28:13

Python批量处理Word:自动插入图片和表格的办公自动化脚本

简介:这份资源面向需要批量处理Word文档的Python学习者与办公自动化从业者,聚焦用python-docx库把图片和表格高效写入.docx文件,解决手动逐份编辑重复文档的痛点,属于入门到进阶的实用技能练习。压缩包共12个文件,约36…

作者头像 李华
网站建设 2026/10/23 21:26:04

从陪读到放手:一个初三家长记录孩子背单词方式的调整过程

去年秋天,一个初三孩子的妈妈跟我聊起她家的晚间日常。孩子英语成绩不算差,但每天背单词的环节总是拖到最晚,书桌前坐半小时,翻来覆去还是那几页。她说得很实在:不是孩子懒,是背了忘、忘了背,看…

作者头像 李华
网站建设 2026/10/23 21:07:20

vtstscripts.tgz:Linux系统级诊断脚本集实战指南

简介:vtstscripts.tgz 是一套面向Linux运维工程师与服务器管理员的轻量级自动化脚本工具集,聚焦系统监控、日志分析、服务管理、备份恢复及安全巡检等高频运维场景,助力中初级运维人员提升日常操作效率与故障响应能力。压缩包共152个文件&…

作者头像 李华
网站建设 2026/10/23 21:06:08

东芝200swin7X64驱动手动安装指南:绿色版驱动包实战与避坑

简介:这份资源是专为东芝200S笔记本在Windows 7 64位系统下准备的驱动合集,面向需要重装系统或修复硬件识别问题的用户,尤其适合习惯手动逐项安装、希望自主掌控驱动版本的中级操作者。压缩包共119个文件,约5.06MB,以d…

作者头像 李华