清华团队发布两项Physical AI成果,RoboTwin评测登顶

清华团队发布两项Physical AI成果,RoboTwin评测登顶

AI 资讯 来源:新闻/公众号 发布时间:2026-10-26 08:43:45 预计阅读 5 分钟

近日,厘清智能创始人、清华大学人工智能学院李一鸣教授团队发布两项 Physical AI 研究成果:世界动作模型 PrismWAM,以及面向机器人执行诊断与持续改进的 Agentic 框架 RoboDoctor。PrismWAM 在 RoboTwin 2.0 评测中位列第一;RoboDoctor 在覆盖 RoboDojo 全部 54 项任务的测试中取得 57.1 分,位居当前对比首位。

RoboTwin第一、RoboDojo领跑:Physical AI的下一轮Scaling,为什么是Physics?

随着通用基础模型理解、推理与规划能力不断增强,一个更根本的问题浮现:让机器人理解世界,和让机器人真正改变世界,是两种不同能力。理解指令不等于知道如何施力,识别物体不等于理解其接触、运动与受力变化,规划路径不意味着能可靠完成任务。这正是 Physical AI 下一阶段的关键命题:Scaling Semantics,还是 Scaling Physics?前者让模型拥有更强语义理解与任务推理,后者让模型理解物理状态与动作后果,使机器人能感知变化、应对不确定性,并在失败中纠正与自我改进。两项工作分别从模型与系统层面探索 Scaling Physics。

RoboTwin第一、RoboDojo领跑:Physical AI的下一轮Scaling,为什么是Physics?

现有世界动作模型尝试将未来状态预测与动作生成结合,但问题在于:是否应把世界外观当作世界状态本身来建模?RGB 视频中语义信息与物理信息交织,却具有不同控制价值。PrismWAM 的核心洞察是将语义上下文与物理状态解耦,建立 Semantic Planning → Physical Rollout → Executable Action 的注意力链路:从 RGB 观测学习任务语义,通过深度表征预测连续几何状态变化,动作生成直接利用物理演化表征,不直接读取 RGB 特征,使建模能力更多用于几何结构与空间状态变化。

RoboTwin第一、RoboDojo领跑:Physical AI的下一轮Scaling,为什么是Physics?

RoboTwin 是双臂机器人操作权威评测基准,涵盖 50 项任务并在背景、光照、杂物、桌面高度与语言指令五个维度随机化。C2R 评测重点考察从干净训练环境迁移到随机化测试环境的泛化能力。在没有动作数据预训练的情况下,PrismWAM 在两类场景平均成功率达 83.67%,取得官方榜单第一(截至 2026 年 10 月 23 日);C2R 高难度评测成功率 75.5%。

PrismWAM 使用预训练视频模型初始化,并针对深度编码器进行约 2,300 小时深度数据预训练,但未进行额外动作数据预训练,减少了对大规模动作预训练的依赖。其在 RoboTwin 2.0 上超越 OpenWAM、Xiaomi Robotics-0、π0.5 等采用大规模动作数据预训练的方法,在 RoboDojo 上也超越一众同类方法。这并不意味着动作数据预训练不再重要,而是揭示另一种可能性:决定数据价值的不仅是规模,还有数据质量、模态以及模型学习世界的方式。

需要强调,PrismWAM 仍是 proof of concept,并未证明大规模动作数据不再必要,而是尝试证明通过重新思考语义理解、物理状态与动作输出的关系,模型有机会以更高数据效率建立强大世界动作模型。Scaling Physics 不是拒绝 Scaling,而是重新思考 Scaling 的对象。

当机器人从单次动作生成走向长程任务执行,Scaling Physics 还需进入系统层面,这正是 RoboDoctor 的出发点。长程任务中前一步结果会改变后一步条件,一次抓取偏移可能影响放置,一次接触失误可能让合理动作失效。从 Policy 到 Agent,底层策略根据观测生成动作,系统进一步管理动作与任务结果的关系:执行前判断是否干预,执行后检查是否达到预期,并将判断连接到后续步骤,使物理能力提升从单次动作生成延伸到完整任务的闭环执行。

标签: AI 资讯 AI

更多推荐阅读

国产AI电影首登院线:0演员出演,成本降9成

国产AI电影首登院线:0演员出演,成本降9成

国内首部AI超写实电影《三星堆:未来往事》10月23日登陆院线。据猫眼专业版数据,上映首日票房30.15万元,累计综合票房40.1万元;灯塔专业版预测其总票房为207.8万元。对比2026年8月5日上映的动画电影《牛来》,其首日票房3420万元、最终累计6426.5万元,但《牛来》处于暑期档,大盘基础更强。 该片是中国首部获得国家电影局公映许可证的AI超写实院线电影,时长100分钟,所有角色均为...

2026-10-26 09:40:35
Einsia AI推出LaPlace's Eye:让模型走进真实世界

Einsia AI推出LaPlace's Eye:让模型走进真实世界

Einsia AI发布Quant Arena并推出研究品牌LaPlace’s Eye,首个私有策略Kepler-1在榜单中领先。Quant Arena让大模型基于2022至2023年数据开展研究,经有限轮次迭代后提交策略,再在封存的2024年数据上回测。代表配置口径下,等权市场年化收益17.1%,受测模型最高为10.7%,Kepler-1为94.0%。该数据来自历史模拟回测,非实盘业绩;论文全量配...

2026-10-26 09:31:19
工博会机器人组队接力干活,群体智能时代来了?

工博会机器人组队接力干活,群体智能时代来了?

今年工博会现场,400多家机器人企业同场竞技,中科第五纪展台的三台纪灵-L1机器人通过组队干活吸引了不少海外观众驻足。三台机器人接力完成拆垛、倒料、接料、码垛等物料流转流程,全程无需人工介入,将多个工位串成一条连续作业线。本届工博会上,越来越多企业开始用具体任务展示机器人“能干活”,中科第五纪则将展示推向更高层:让三台机器人自主接力,以多机协同探索从“单机智能”走向“群体智能”。这场演示的关键在于...

2026-10-26 09:43:02
Kimi发布K3.1 Pro:3万亿参数模型升级,算力有限下如何兼顾商业与模型

Kimi发布K3.1 Pro:3万亿参数模型升级,算力有限下如何兼顾商业与模型

10月24日凌晨,月之暗面发布Kimi K3.1 Pro,称其为K3.1系列首个模型、迄今能力最强的3万亿级参数模型,距K3旗舰模型发布已过去99天。所谓“3万亿级参数”并非扩参,K3.1 Pro仍维持K3的2.8万亿总参数规模,未重新预训练,重点是在既有底座上增强后训练,大幅增加后训练算力投入,尤其是面向数百个下游领域的联合强化学习。 过去两周,DeepSeek于10月17日发布V4.1 Fl...

2026-10-26 08:32:06
Claude日烧3万亿Token破纪录,三兄弟联手统治调用榜

Claude日烧3万亿Token破纪录,三兄弟联手统治调用榜

全球最大模型聚合路由平台OpenRouter数据显示,自Opus 5.5上线一个月来,7日平均Token使用量暴涨3.6倍。此前在0.62万亿Token上下横盘四个月的7日均线,从9月下旬Opus 5.5上线起近乎垂直攀升,一路冲上2.26万亿,单日最高峰值逼近3万亿Token。 9月底Opus 5.5率先起跑,Sonnet 5.5、Haiku 5.5随后接力,Claude 5.5家族“三兄弟”...

2026-10-26 08:59:47
AI智能体手机加速爆发:厂商押注下一代入口

AI智能体手机加速爆发:厂商押注下一代入口

最近,手机大战再次打响:苹果正式进入折叠屏、三星将折叠屏拆成多种形态、小米展示18 Fold,同时存储芯片价格持续上涨,推动行业进入新一轮周期,迫使厂商收缩中低端产品线。更受关注的是AI智能体手机。过去十几年手机硬件不断升级,但操作方式几乎未变。2026年这一领域开始加速。高通CEO安蒙称“2026是Agent之年”。今年7月阶跃星辰发布AI手机STEPX Neo,荣耀发布Robot Phone,...

2026-10-26 08:27:32
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部