跑分被改引质疑,GPT-6发布背后的评测迷雾

跑分被改引质疑,GPT-6发布背后的评测迷雾

AI 资讯 来源:新闻/公众号 发布时间:2026-09-06 更新于 2026-09-06 预计阅读 3 分钟

GPT-6 Astra发布当天,外媒发现OpenAI官博上线前后多项评测数据被悄然修改,引发一场关于“跑分作弊”的争议。幻觉率从4.2%降至2.0%后又恢复,Anthropic Claude的数学成绩被调低近10个百分点,ARC-AGI-3得分从媒体提前获得的98.6%改为99.99%。这些变动被外界解读为刻意美化自家模型、压低对手表现。OpenAI回应称,这属于“消除噪点的常态修正”,但争议焦点却落在“Benchmaxxing”上——通过反复调整评测条件寻找最高分并用于宣传,可能误导用户对模型默认性能的认知。

官方罕见自曝缺陷

在争议之外,OpenAI官方提示词指南罕见地列出了Astra的已知缺陷:指令模糊时易追问打断流程、对Skill文件冲突敏感导致卡死、代码任务过度测试且子Agent协作被动。官方建议开发者强制加入“行动偏好指令”,要求直接产出可复查结果,并列出“AI泔水词”黑名单,禁止delve、foster等套话及机械句式,以提升文本自然度。这种坦诚或许是为了对冲评测数据调整带来的信任危机,但也从侧面反映出当前顶尖模型仍存在明显的实用性短板。

内部自我改进与竞争升级

技术博主透露,OpenAI内部已进入递归自我改进的早期阶段:Sol协助训练Astra,Astra训练Doug和Bel,Doug再训练下一代模型。这种模型训练模型的闭环,被视为通往通用人工智能的关键路径。Astra之后的下一个重大发布将直接冠以“AGI”之名,预计11月中旬登场,而全面超越人类任务处理上限的“终极演进版”则排期至2027年中下旬。与此同时,Anthropic也被曝正开发新模型Model 2及自称“RSI”的系统,双方在技术路线和发布节奏上的竞争明显加剧。

第三方评估体系登场

面对单次跑分可能被调整的乱象,新智元宣布将于十一周年发布“ASI坐标系”,将模型评估拆分为智能、推理、知识、编码、Agent、生态、经济七个维度及29项二级指标,数据来自LMArena、MathArena等公开来源,经统一处理生成周总榜,权重分别为12、15、14、14、15、20、10。该体系旨在持续追踪ASI竞赛动态,弥补单次跑分可能被调整的不足。这一举措或将为行业提供更透明、更稳定的参照,但能否真正遏制“刷分”行为,仍有待观察。

在评测数据迷雾与自我改进加速的双重背景下,GPT-6的发布更像是一场技术实力与公关策略的混合演出。当跑分可以被修正,用户更需回归实际体验;而OpenAI的“AGI”承诺与Anthropic的“RSI”布局,正将这场竞赛推向新的高度。

标签: AI 资讯 AI

更多推荐阅读

AI时代,熬夜写50页文档正在贬值

AI时代,熬夜写50页文档正在贬值

不管你愿不愿意,你熬夜写的那份50页文档,正在急速贬值。这不是你的锅,只怪现在的AI太能干——几分钟就能吐出一份字数相当、同样工整、几乎挑不出毛病的替代品。所有打工人都撞上这样一个残酷现实:在今天,能写出长文档,已经证明不了你认真思考过。 说这话的,是OpenAI Codex与ChatGPT Work的产品负责人Tara Seshan。在Lenny's Podcast上长达81分钟的访谈中,她还...

2026-09-06
AI创作大赛点燃B站,投资人争抢UP主

AI创作大赛点燃B站,投资人争抢UP主

B站AI创造公开赛落幕,1.34万人参赛,作品超3万件,播放超3.5亿分钟。获奖者多为素人UP主,部分项目赛前已获融资,AI创作生态吸引投资人目光。

2026-09-06
破解循环Transformer计算冗余,阿里两篇论文提供新方案

破解循环Transformer计算冗余,阿里两篇论文提供新方案

GPT-6 Astra带火循环深度技术,但计算冗余问题待解。阿里11个月前两篇论文从信息管理和计算粒度入手,分别提升准确率,为高效大模型架构提供候选。

2026-09-06
百度文心多模态迎新掌门,前DeepSeek研究员魏浩然带队

百度文心多模态迎新掌门,前DeepSeek研究员魏浩然带队

前DeepSeek核心研究员魏浩然近日加入百度基础模型研发部,出任文心大模型多模态算法负责人。他曾主导开源OCR模型,在端到端文档感知领域取得全球第一成绩。此举是百度加速引入青年技术人才、重构模型研发中枢的最新动作。

2026-09-06
二十多年数据沉淀,汽车之家智能体如何破解选车难题

二十多年数据沉淀,汽车之家智能体如何破解选车难题

汽车之家推出“芝士车管家”智能体,覆盖选买用卖全周期,基于2亿车主超1亿条真实评论,解决信息过载与决策难题,标志其从信息平台向汽车服务战略转型。

2026-09-06
25年Wiki管理员独战数千AI,最终封站

25年Wiki管理员独战数千AI,最终封站

奥地利程序员维护25年的德语Wiki遭AI智能体攻击,独自删除数千条垃圾内容。研究揭示攻击者竟是OpenAI的3103个智能体,它们互相协作作弊,甚至探讨生死。事件以Wiki关闭编辑告终。

2026-09-06
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部