编码模型新招:自己出题自己练,两个月反超闭源旗舰

编码模型新招:自己出题自己练,两个月反超闭源旗舰

AI 资讯 来源:新闻/公众号 发布时间:2026-08-30 21:12:57 预计阅读 4 分钟

训练一个能干活的模型,最贵的不是显卡,而是训练题。尤其是编码和智能体任务,光有题目和答案远远不够,还需要配套可运行的环境、判分测试,并防止模型抄袭旧提交。题目难度也需适中,过易或过难都无益于学习,且数量必须充足。过去这些工作高度依赖人工,慢、贵且供不应求。

今年8月,Ornith发布397B MoE、35B MoE和9B Dense三档权重,训练流程中新增了一个关键环节:模型自己生成训练任务、搭建解题脚手架、运行解题轨迹,并将这三段统一投入强化学习。在Terminal-Bench 2.1上,Ornith-1.5的397B版本得分86.1,较两个月前的1.0版本(77.5)提升8.6个百分点,甚至超过了其自测的Claude Opus 4.8(85.0)。

从“怎么解”到“该练什么”

6月的Ornith-1.0已经实现了将agent脚手架变为可学习对象,模型可以自行调整工具、任务拆解和重试策略。而1.5版本进一步将题目生成纳入闭环:系统根据代码库、高层任务说明和模型历史解题记录,生成比已会题目更难一档的新题,并为每题生成或改进专属脚手架,最终跑出解题轨迹,奖励反向传回全部三段,用GRPO优化。出题质量也被纳入评分,防止模型偷懒出送分题。

为了防止废题,任务奖励被拆分为有效性、前沿难度、新颖性三个相乘的信号。有效性是硬门槛,不合格直接判零;前沿难度通过采样轨迹计算经验成功率,目标值约0.2,即好题应让模型十次做成两次,难度随模型能力自动爬升;新颖性权重最低,仅负责去冗余。

自测成绩与官方榜单的差异

需要特别注意的是,86.1这个分数是Ornith团队自测结果(配置为4小时超时、32核CPU、48GB内存),而Terminal-Bench 2.1官方验证榜单(截至2026年8月19日共17项)中并没有Ornith-1.5。官方榜上Opus 4.8经核验为78.9%,榜首为Claude Code加Fable 5的83.8%。同一模型在不同测试条件下分数差异显著,自测与官方验证不可直接对比。此外,MIT许可仅指权重,GitHub仓库并未包含完整训练实现、任务集或可复现评测脚本。

小模型同样亮眼

除了旗舰版,35B-A3B MoE(激活约3B参数)在Terminal-Bench 2.1得分67.8,优于Gemma 4-31B(42.1)和Muse Glimmer-30B(51.7);SWE-bench Verified为79.0对52.0。9B Dense自测Terminal-Bench 46.2、SWE-bench Verified 70.6、GPQA Diamond 86.4,但在工具调用类任务(如MCP-Atlas、Toolathlon-Verified)上不及Gemma 4-31B。

Ornith-1.5较1.0在Terminal-Bench提升约11.1%,核心变化是从学习“怎么解”转向学习“该练什么”,将数据生产纳入强化学习闭环。开放模型追赶闭源旗舰的方式,在堆参数和抄配方之外,新增了“自己造题”的路径。模型上限除算力外,还取决于题库质量。这一思路或许预示着,未来的模型竞争将不仅是算力和架构的比拼,更是“自我进化”能力的较量。

标签: AI 资讯 AI

更多推荐阅读

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

《纽约邮报》曾称Dyna Robotics为“全世界最无聊的机器人”,而公司创始人认为这是“对一家机器人公司最高的赞美”。Dyna-1主攻叠毛巾、叠衣服;新发布的Dyna-2让机器人Taku进入洗衣房,完成放脏衣服、操作洗衣机、取出送烘干机、折叠放架等流程。联合创始人Jason Ma表示,机器人真正开始工作本就应是“无聊”的,真实部署是衡量机器人的“唯一评估”;机器人不能落地,不是因为没有腿或手,...

2026-10-20 09:48:01
前剪映负责人做视频Agent获千万美元融资

前剪映负责人做视频Agent获千万美元融资

视频Agent赛道出现新玩家Pexo,与采用画布工作流的产品不同,Pexo将剪辑和视频整合在产品中,支持用自然语言对话创作视频。公司已获千万美元天使轮融资,此前于2025年10月获得数百万美元投资。创始人廖谦曾任生数科技产品副总裁、Vidu产品负责人,也曾在腾讯、字节跳动任职,从技术研发转向AI产品与商业化,先后从0到1搭建火山引擎智能创作云,并在剪映/CapCut发起海外AI内容平台Pippit...

2026-10-20 09:26:14
DeepSeek搜索卷起来后,前负责人创业做全网捞人

DeepSeek搜索卷起来后,前负责人创业做全网捞人

近日,DeepSeek开放了自研网页搜索接口,披露该引擎每天处理全球数亿次请求,已收录千亿级网页,正将搜索能力开放给更多开发者。 在搜索对象中,人物信息最为特殊,难点在于把零散线索拼到同一个人身上。Simplex AI创始人张博曾任DeepSeek-VL项目负责人,其团队推出的Lev8主要面向GTM,人物搜索是流程起点。用户用自然语言描述目标,系统即寻找符合条件的对象,结合公开资料判断匹配度,生...

2026-10-20 08:09:15
蚂蚁领投!清华系AI创企熵简科技完成C轮融资

蚂蚁领投!清华系AI创企熵简科技完成C轮融资

智东西10月19日消息,北京AI金融创企熵简科技宣布完成C轮融资,由蚂蚁集团领投,东方国信与乔贝资本跟投。融资后,蚂蚁集团将与熵简科技在AI金融智能体研发、AI金融垂域模型训练等领域展开深度合作。 熵简科技成立于2017年,主要依托大数据、云计算、人工智能等技术,打造全资产、全流程的端到端智能资产管理平台。公司名称源自热力学第二定律中度量系统混沌程度的“熵”,“熵简”寓意通过AI降低金融投研的复...

2026-10-20 09:26:26
Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

在曼谷举行的国际货币基金组织佩尔·雅各布森讲座上,Anthropic联合创始人Jack Clark提出判断称“奇点已经到来”,即技术进步速度已甩开人类理解和跟进的能力。他预测,在奇点驱动下,到2030年美国GDP将升至44万亿美元。按常规推演,该数字为33.5万亿美元,奇点带来15.4%的额外GDP,平均每年约6%的GDP增长;到2030年前后,累积生产率提升与资本积累将把美国年化经济增长率推高至...

2026-10-20 08:36:21
港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

谷歌一篇论文提到KV Cache至少能压缩6倍,曾引发美光等存储芯片巨头股价下跌。几个月后,岩山科技旗下岩芯矩阵联合港科大、CMU等高校发布并开源EdgeRock-4B,对KV Cache的处理更进一步:上下文从4K扩展到256K,KV Cache占用始终固定在72MiB,相比源模型减少99.1%。一张80GB显卡可同时跑512路长推理,输出吞吐达12124 tokens/s,是源模型的6.42倍...

2026-10-20 23:25:26
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部