150美元机械臂用GPT-6画金门大桥

150美元机械臂用GPT-6画金门大桥

AI 资讯 来源:新闻/公众号 发布时间:2026-09-20 17:37:58 预计阅读 6 分钟

一台售价约150美元的SO-101机械臂,在GPT-6 Astra控制下画出了金门大桥。它不是照预设轨迹作画,而是先规划落笔位置,再通过摄像头边画边看,最终完成红蓝相间的画作。视频迅速走红,Sam Altman直接转发。

这引发了一个问题:谁会成为机器人领域的OpenAI?如今答案可能是OpenAI自己。

机器人领域的OpenAI,竟然是OpenAI自己?

CMU Robotics的Wenli Xiao做了实验:录下人类完成新任务的视频,丢进Codex,再让Astra控制机械臂用同样方式完成任务,竟然一次跑通。他称之为“physical ICL”——大模型从上下文临时学会新任务的能力,搬到了物理世界。

还有人让Astra当“机器人工程师”。Lingxiao Guo把真实机器人演示的多视角画面和动作数据交给Astra,让它自己处理相机标定、场景重建和物理参数,再搬进MuJoCo,得到可继续接触仿真和动作回放的real2sim环境。Dmytro Hrybov在MuJoCo中给Astra配了Kinova Gen3机械臂和Shadow Hand五指机械手,让它握铅笔画出毕加索的鸽子,需同时处理握笔姿态、摩擦和笔尖接触。

机器人领域的OpenAI,竟然是OpenAI自己?

更有说服力的是RoboCurve的测试:把Astra接到两只真实I2RT YAM机械臂上。每一步Astra能看到顶部和两个手腕共三个相机视角及机械臂状态,直接给出末端执行器的x、y、z、yaw、pitch、roll和夹爪状态,再由底层IK转换成关节动作。任务是把红色积木抓进碗里,20次成功19次,成功率95%;同样测试中Fable 5.1只成功8次。一个并非专为机器人训练的通用模型能做到这种程度,出人意料。

这撞上了过去几年机器人行业最热的路线——专门给机器人训练“基础模型大脑”。Physical Intelligence希望训练跨任务、跨场景、跨本体的通用机器人基础模型,其π系列把视觉、语言和动作放进同一套模型;Skild的目标是“Any task, any robot, one brain”。两家代表典型思路:机器人需要海量机器人数据训练出理解身体和动作的基础模型。

机器人领域的OpenAI,竟然是OpenAI自己?

但Astra出现后,Amazon Alexa Principal Scientist、Retrocausal联合创始人Zeeshan Zia判断:“机器人领域的OpenAI,看来可能就是OpenAI,而不是Physical Intelligence或Skild。”Astra没有先收集大量机器人轨迹再专门训练,而是带来另一种可能:如果通用AI本身足够强,还需不需要从头造机器人的大脑?

OpenAI其实很早就做过机器人。2018年推出Dactyl,让Shadow Dexterous Hand在真实世界旋转物体,后又完成魔方操作。但几年后OpenAI关闭机器人团队。Wojciech Zaremba提到现实限制:机器人缺少像互联网文本那样可大规模获取的数据。如今OpenAI先把模型在语言、代码、视觉和Agent上做大,积累关于物体、空间、因果关系和人类行为的知识,再把这些知识变成身体动作。Sam Altman已明确表示OpenAI会做人形机器人,也会探索其他形态,关键仍是让机器人工作的“大脑”。

目前Astra不直接控制每一台电机。以RoboCurve实机测试为例,Astra给出末端执行器目标位置和姿态,再由底层逆运动学转换成关节动作。分工是:Astra判断“手应该去哪里”,传统控制栈解决“每个关节怎么动”。英伟达前研究科学家Yu Xiang也提出,如何把最先进AI模型真正接进manipulation值得关注。

但问题也逐渐显现。有人让Astra直接输出Unitree Go1的joint targets,尝试以50Hz控制四足机器人行走。实验跑了起来,但推理速度跟不上实时控制,物理模拟必须在每次模型调用之间暂停,250次推理只换来约5秒行走。Astra能决定“下一步该怎么动”,但直接接管毫秒级底层控制还不现实。更现实的形态可能是分层分工:Astra负责理解环境、推理和规划,低层policy与控制器负责快速稳定执行。

会规划动作,距离真正做好动作还有不小距离。RoboCurve测试中,积木入碗成功率95%,但换成把圆形拼图准确嵌进凹槽,成功率立刻跌到10%,20次只完成2次。很多距离成功仅一步之遥:Astra已找到拼图、抓住旋钮并移动到目标凹槽附近,却很难完成最后精确插入。这最后几毫米展现了机器人最棘手的问题:位置和角度稍有偏差,零件就无法对准;真正接触受硬件误差干扰,下一步动作也无法完成。

标签: AI 资讯 AI

更多推荐阅读

国产端侧600T算力将至,黄仁勋的小黄鸭训练能在本地跑了

国产端侧600T算力将至,黄仁勋的小黄鸭训练能在本地跑了

近年来,AI算力赛道持续升温。英伟达在柏林GTC大会上展示机器鸭Microduck,黄仁勋称其在RTX Spark上诞生、云端超级计算机训练、数字孪生中学习。近日,天数智芯在上海举办“从模型到世界”媒体开放日,这是其今年1月登陆港股以来首次系统性展示产品全貌。现场展示了通过3D打印和手工组装的“手搓版”Microduck,表演走路、打盹、起身等动作。与英伟达依赖云端算力不同,天数智芯的小黄鸭在一台...

2026-11-04 19:44:09
哈佛最年轻华人教授尹希离开OpenAI,仅待5个月

哈佛最年轻华人教授尹希离开OpenAI,仅待5个月

哈佛史上最年轻的华人正教授、斯隆奖和物理学新视野奖得主、弦理论领域明星学者尹希,官宣离开OpenAI。从今年5月底传出加盟消息到如今亲自宣布离开,前后仅半年。他在个人推特中表示,这是一段非常棒的旅程,不过打算提前下车,去探索新的方向。这是他的第一份企业工作,他特别感谢Alex Lupsasca和Boris Alexeev帮助自己适应工作,也感谢Dan Roberts的支持。至于下一站,尹希尚未透露...

2026-11-04 19:20:39
OpenAI发布AGI新标准LifeVal,影响全球80亿人

OpenAI发布AGI新标准LifeVal,影响全球80亿人

OpenAI今日推出AGI新基准LifeVal,宣称AGI正式从“考场”走向“生活”。该基准价值1.7万亿美元,若全球80亿人用上此级别AGI将受影响。与此同时,GPT-6.2 Astra实测在网上流传,奥特曼发推称“人们应永远掌控未来,不应将未来控制权拱手让给超级智能”。 LifeVal是全球首个“个性化代理消费者任务”基准,不测做题只测“办事”。OpenAI参考美国劳工统计局及25国时间使用...

2026-11-04 18:25:49
OpenAI神秘双模型闪现API又撤回,GPT-6.2 Astra真要来了?

OpenAI神秘双模型闪现API又撤回,GPT-6.2 Astra真要来了?

OpenAI下一代模型GPT-6.2 Astra发布在即。Codex负责人Tibo以“Le GPT Fat”暗示新模型将至,随后OpenAI官方API列表短暂出现两个未公开模型ID——rc-ada-or-vm和rc-ada-sh-vm,几分钟后被撤下,期间调用者均遇503容量受限错误。同日,OpenAI官博发布硬件工程长文,披露一个未发布的“内部新模型”,起步跑分即超过GPT-6 Astra最高档...

2026-11-04 18:22:14
DeepSeek Harness再发新版:优化代码审查与手机端体验

DeepSeek Harness再发新版:优化代码审查与手机端体验

智东西11月4日报道,DeepSeek Harness更新GitHub仓库,推出v0.2.2-alpha.3预发布版本,围绕代码审查、自动化任务管理、SDK和插件生态进行扩展。此前一天DeepSeek出现网页及API服务部分中断,网友猜测新模型将至。 代码审查方面,新增实验性“变更请求与工作树”统一入口,用户可通过可搜索文件树查看本地代码和PR差异,逐个文件查看修改内容,选中代码片段添加评论后交...

2026-11-04 17:46:57
腾讯Hy4正式版发布:首增视觉能力,实测操作微信与3D建模

腾讯Hy4正式版发布:首增视觉能力,实测操作微信与3D建模

腾讯11月4日发布最新一代旗舰模型Hy4正式版,并计划开源模型权重。相比今年8月发布的Hy4 preview,Hy4显著扩展了预训练和后训练规模,首次引入视觉能力,大幅提升指令遵循、长文理解、长程任务、深度研究等综合能力。 视觉能力的从无到有解锁了新玩法,用户可上传照片让Hy4确定地理位置并核实信息,或根据课本图片打造3D讲解网页。基准测试显示,Hy4在智能体编程、搜索、办公等领域多个公开测试中...

2026-11-04 17:14:18
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部