跑分被改引质疑,GPT-6发布背后的评测迷雾

跑分被改引质疑,GPT-6发布背后的评测迷雾

AI 资讯 来源:新闻/公众号 发布时间:2026-09-06 10:17:33 预计阅读 3 分钟

GPT-6 Astra发布当天,外媒发现OpenAI官博上线前后多项评测数据被悄然修改,引发一场关于“跑分作弊”的争议。幻觉率从4.2%降至2.0%后又恢复,Anthropic Claude的数学成绩被调低近10个百分点,ARC-AGI-3得分从媒体提前获得的98.6%改为99.99%。这些变动被外界解读为刻意美化自家模型、压低对手表现。OpenAI回应称,这属于“消除噪点的常态修正”,但争议焦点却落在“Benchmaxxing”上——通过反复调整评测条件寻找最高分并用于宣传,可能误导用户对模型默认性能的认知。

官方罕见自曝缺陷

在争议之外,OpenAI官方提示词指南罕见地列出了Astra的已知缺陷:指令模糊时易追问打断流程、对Skill文件冲突敏感导致卡死、代码任务过度测试且子Agent协作被动。官方建议开发者强制加入“行动偏好指令”,要求直接产出可复查结果,并列出“AI泔水词”黑名单,禁止delve、foster等套话及机械句式,以提升文本自然度。这种坦诚或许是为了对冲评测数据调整带来的信任危机,但也从侧面反映出当前顶尖模型仍存在明显的实用性短板。

内部自我改进与竞争升级

技术博主透露,OpenAI内部已进入递归自我改进的早期阶段:Sol协助训练Astra,Astra训练Doug和Bel,Doug再训练下一代模型。这种模型训练模型的闭环,被视为通往通用人工智能的关键路径。Astra之后的下一个重大发布将直接冠以“AGI”之名,预计11月中旬登场,而全面超越人类任务处理上限的“终极演进版”则排期至2027年中下旬。与此同时,Anthropic也被曝正开发新模型Model 2及自称“RSI”的系统,双方在技术路线和发布节奏上的竞争明显加剧。

第三方评估体系登场

面对单次跑分可能被调整的乱象,新智元宣布将于十一周年发布“ASI坐标系”,将模型评估拆分为智能、推理、知识、编码、Agent、生态、经济七个维度及29项二级指标,数据来自LMArena、MathArena等公开来源,经统一处理生成周总榜,权重分别为12、15、14、14、15、20、10。该体系旨在持续追踪ASI竞赛动态,弥补单次跑分可能被调整的不足。这一举措或将为行业提供更透明、更稳定的参照,但能否真正遏制“刷分”行为,仍有待观察。

在评测数据迷雾与自我改进加速的双重背景下,GPT-6的发布更像是一场技术实力与公关策略的混合演出。当跑分可以被修正,用户更需回归实际体验;而OpenAI的“AGI”承诺与Anthropic的“RSI”布局,正将这场竞赛推向新的高度。

标签: AI 资讯 AI

更多推荐阅读

黄仁勋放话断供不负责任AI客户,算力治理争论升温

黄仁勋放话断供不负责任AI客户,算力治理争论升温

10月14日,英伟达CEO黄仁勋接受彭博社采访时被问及,若有客户不负责任地开发AI,英伟达是否会停止供货。他回答:“这是一个假设,但答案是‘会的’。”让算力供应方充当AI治理关口,研究界已讨论多年。2023年,研究者Janet Egan和Lennart Heim提出算力提供方可参照金融业“了解你的客户”规则,核实大规模算力用户身份和用途,保存记录并上报可疑情况。英伟达占AI训练芯片市场约九成份额,...

2026-10-21 08:20:29
具身智能新玩家YITA伊塔动力融资破亿

具身智能新玩家YITA伊塔动力融资破亿

ZP独家获悉,具身智能操作平台与动力系统公司「YITA Dynamics伊塔动力」宣布完成超亿元种子和种子+轮融资,由经纬创投、商汤国香资本、建银国际、L2F光源创业者基金、银河通用、傅利叶智能联合投资,光源资本担任孵化方和独家财务顾问。 YITA取自希腊字母Eta(η),在新一代强化学习与数据驱动控制范式中代表学习率,在动力、传动与能源系统中代表效率。公司旨在以智能学习效率和物理传动效率为核心...

2026-10-21 09:57:24
图灵奖得主同台,清华系黑马亮出物理AI王牌

图灵奖得主同台,清华系黑马亮出物理AI王牌

10月20日,首届2026物理AI与世界模型大会在南京国际博览中心开幕。图灵奖得主杨立昆与姚期智视频连线,沈向洋、于海斌两位院士发表主旨演讲。成立仅三年、累计完成9轮融资的清华系公司千诀科技,由创始人高海川在开幕式主论坛发布面向真实物理世界的具身智能大脑底座——Polibrain预测式世界模型。其技术底牌源于千诀联合清华大学团队围绕“隐变量可辨识性”发表的公开成果,比LeCun团队同类工作早约一年...

2026-10-21 08:01:48
OpenAI急推300亿美元融资,抢在Anthropic IPO前锁定金主

OpenAI急推300亿美元融资,抢在Anthropic IPO前锁定金主

OpenAI正加速推进约300亿美元融资,目标估值超1.4万亿美元,试图在竞争对手Anthropic预计11月中旬IPO前锁定投资者。软银、阿布扎比MGX及其他现有投资方正洽谈参与。 两家前沿AI实验室正争夺同一批投资者。OpenAI上周与多头基金和主权财富基金会谈,Anthropic同期举办投资者日活动。知情人士称,OpenAI希望在Anthropic财务披露前完成融资,避免被直接比较。有律师...

2026-10-21 08:53:21
DeepSeek开源自家印钞机级推理框架DeepInfer

DeepSeek开源自家印钞机级推理框架DeepInfer

昨天,DeepSeek 开源了支撑自家百亿级调用的云服务推理框架 DeepInfer,以及生产级分词组件 deepseek-recipe,均采用 Apache 2.0 协议。官方表示,未来新模型的推理代码和性能优化也会持续在 DeepInfer 中开源。 基于 DeepInfer,DeepSeek 单一集群服务吞吐已达每天 155 万亿 Tokens,按最低价格计算,整体收入约每卡每小时 38 ...

2026-10-21 09:59:40
拒绝上下文崇拜的AI墨水屏Flowtica再融数千万

拒绝上下文崇拜的AI墨水屏Flowtica再融数千万

AI 墨水屏赛道正在起势。AI 硬件品牌 Flowtica 完成数千万人民币新一轮融资,由祥峰资本领投,源码资本、五源资本及清水湾基金等老股东跟投。其 AI 墨水屏产品 Verso 已于 9 月在 IFA 宣发,并正式在海外开启定金预售,将于 12 月交付首批产品。 Verso 是一块 78 克、6.5 毫米厚的磁吸墨水屏,贴在手机背面。开会时按一下开始录音,实时转写、实时总结,结束录音时自动生...

2026-10-21 08:02:57
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部