一颗RGB摄像头,让机器人学会记住空间

一颗RGB摄像头,让机器人学会记住空间

AI 资讯 来源:新闻/公众号 发布时间:2026-09-11 15:05:51 预计阅读 6 分钟

机器人正在学习一种曾经只属于人类的能力:记住自己走过的世界。第一次进入陌生房间时,人不会逐帧存储一切,而是记住关键结构:门、桌子、经过的位置以及自己当前所处的位置。这种选择性记忆支撑了人类在复杂环境中的持续行动,也是机器人走向真实世界必须解决的问题。

今年4月,蚂蚁灵波开源的流式3D重建基础模型LingBot-Map,正是在“机器人如何记住空间”这一核心问题上探索出新路线。无需复杂硬件,仅靠一颗普通RGB摄像头,就能在视频采集过程中实时完成相机位姿估计与场景三维结构重建,填补了实时空间感知领域的关键技术空白。在穿越多房间的长序列中,面对环境剧变与大幅视角变换,LingBot-Map仍表现出极强的鲁棒性。

从GitHub爆火到ECCV Oral,全球开发者把LingBot-Map玩出新高度

截至目前,LingBot-Map官方GitHub项目已获得16.9K Stars、1.9K Forks,并多次登上GitHub Trending,成为3D视觉领域备受关注的开源项目之一。

如今这项研究迎来新的认可。其论文《Geometric Context Transformer for Streaming 3D Reconstruction》入选ECCV 2026 Oral,将在会议期间进行口头报告。在ECCV开幕式上,机器之心前方编辑还在Award Candidates名单中看到了这项工作。从GitHub社区的高度关注到顶级视觉会议的认可,LingBot-Map完成了从开发者生态到学术界的双重验证。更重要的是,它背后反映出一个变化:机器人空间感知的竞争,正在从看见世界走向记住世界。

从GitHub爆火到ECCV Oral,全球开发者把LingBot-Map玩出新高度

在入选ECCV Oral之前,LingBot-Map已在开源社区收获大量关注。有人快速完成复现验证,有人把它搬到不同硬件环境尝试运行,也有开发者探索新的空间数据采集方式。开源后不久,有开发者制作了可在Apple Silicon Mac上本地运行的原生桌面前端和3D点云查看器;也有人基于Pinokio制作一键启动方案,封装环境配置、依赖安装及Demo运行流程,让没有复杂配置经验的用户也能快速体验。

开发者还开始扩展其硬件适用范围。有人针对RTX 4060 8GB显存设备进行适配,通过优化运行策略降低显存压力,让模型运行在更轻量的GPU环境中。在X平台上,有开发者关注到,过去部分高精度三维扫描依赖专业LiDAR设备或复杂离线优化流程,而LingBot-Map通过普通视频流实现实时流式重建,仅需单GPU即可运行,达到约20 FPS,并能处理超过10,000帧的长序列输入。基于此,有人将Ray-Ban Meta Gen-2智能眼镜改造成3D扫描设备,通过手机App采集数据,调用部署在RunPod上的LingBot-Map后端,约30秒内完成所在空间的三维建图。还有用户在普通戴尔台式机上运行LingBot-Map,仅对办公桌进行一次视频采集,约61.5秒后便获得可交互浏览的三维点云模型。

从GitHub爆火到ECCV Oral,全球开发者把LingBot-Map玩出新高度

开源之后,团队持续更新评测脚本、推理优化、示例案例及问题修复,提升项目可用性和稳定性。官方还展示了超长视频重建结果:在约25,000帧、持续13分钟的室内行走视频中,LingBot-Map仍能保持连续重建,生成完整的三维空间表示。

那么,LingBot-Map究竟解决了什么问题?答案需回到机器人空间感知中最核心的挑战:如何让机器人在不断增长的视频输入中,既保持对空间的长期记忆,又避免计算和存储成本随时间无限增加。流式重建相比离线重建,要面对一个核心矛盾:保留更多历史信息可提升空间一致性,但历史越来越长也会让计算和存储成本快速增长。现有方法大致采用三种路线:基于causal attention的方案缓存之前所有帧的信息,拥有完整上下文,但显存和计算量随序列增长不断增加;循环网络式结构压缩历史状态,但压缩过度可能导致模型遗忘关键几何信息,长时间运行后出现轨迹漂移;结合传统SLAM的方法通过关键帧选择和优化算法维持稳定性,但依赖人工设计规则,需要额外优化过程,难以兼顾实时性。

因此,真正困难的问题是:机器人面对不断增长的视频流,哪些空间信息必须保留,哪些可以舍弃?LingBot-Map将这个问题称为streaming reconstruction中的context management。它希望让模型像人类空间记忆一样,只保留最重要的几何线索,而不是记录所有观察。

为此,LingBot-Map提出了Geometric Context Attention(GCA,几何上下文注意力)。其核心思想来自传统SLAM:一个稳定的空间系统通常需要三类信息:一个固定参考点用来确定坐标;附近区域的信息用来判断当前位置;长距离历史用来避免累计漂移。因此,GCA将流式状态拆成三个部分。

标签: AI 资讯 AI

更多推荐阅读

北京AI独角兽趋境科技完成13亿B轮融资,半年增长超十倍

北京AI独角兽趋境科技完成13亿B轮融资,半年增长超十倍

智东西10月26日消息,北京AI Token生产服务商趋境科技完成B轮融资,金额超13亿元人民币,今年内累计募得24亿元。本轮由浙财创新、萧山资本、工银投资、中关村科学城、星连资本及钱江世纪城共同领投,云创资本、湖南高新纵横、建投华科、申万创新投、中信聚信、珠海科技产业集团、商汤科技、网宿科技、甘肃树帜、常金控、元智未来、清证星竹、小咖资本等跟投,老股东尚势资本继续追投。这是继今年7月完成A轮融资...

2026-10-27 16:58:21
Anthropic递交IPO申请:估值或达2万亿美元,冲击史上最大IPO

Anthropic递交IPO申请:估值或达2万亿美元,冲击史上最大IPO

Anthropic正式提交IPO申请,股票代码定为「ANT」,最快将于11月16日上市,估值有望达1.5万亿至2万亿美元,冲击史上最大IPO。招股书显示,公司上半年营收163亿美元,净亏损807亿美元,并警告未来增长或放缓、亏损可能持续。 财务数据呈现高增长与高亏损并存。2025财年收入达45.9亿美元,同比增长近12倍,但运营亏损从29.8亿美元扩大至80.6亿美元,亏损增速快于收入增速。20...

2026-10-27 16:41:06
Reddit开源社区全面封杀AI项目,Linux因用AI辅助开发被“除名”

Reddit开源社区全面封杀AI项目,Linux因用AI辅助开发被“除名”

开源社区r/opensource版主u/Wolvereness于美东时间10月24日晚发布置顶公告《你的Token一文不值,别再搞AI了》,宣布全面封杀任何使用AI、由AI生成或专门面向AI的项目,新规面向近40万名成员。具体要求包括:发帖项目须活跃维护满1年、拥有3名以上贡献者、已有现成社区,且不得为笔记、PDF阅读器等练手项目;禁止发布寻找维护者或招募贡献者的帖子;发帖账号须注册满1年且有大量...

2026-10-26 08:20:43
朱啸虎:Personal Agent缺真实需求,中国5亿ARR应用将批量涌现

朱啸虎:Personal Agent缺真实需求,中国5亿ARR应用将批量涌现

10月21日,为期五天的ACC 2026 AI创造者嘉年华开幕。硅星人创始人、CEO骆轶航与金沙江创投主管合伙人朱啸虎展开对话,话题涵盖模型发展趋势、AI应用爆发指标、Personal Agent机会及AI时代对创业者的要求。 朱啸虎表示,彻底开源模型(如DeepSeek)的Token消耗量终将超过闭源模型,只要算力跟上便毫无疑问。他透露自己日常使用WorkBuddy加DeepSeek,体验超出...

2026-10-26 08:09:49
马斯克:人类在ASI面前如同黑猩猩,钱和工作都将清零

马斯克:人类在ASI面前如同黑猩猩,钱和工作都将清零

马斯克在近期一场深度访谈中提出,超级AI大概率不会想统治人类,而是根本不在乎人类。他用黑猩猩作比喻:人类比黑猩猩聪明得多,但不会去微观管理黑猩猩的生活,只是给它们划定一片森林。同理,当AI智力超越人类几千倍甚至几百万倍时,人类社会的金钱、权力、领土在它眼里毫无意义。人类面临的最大风险不是被AI奴役,而是被“系统性无视”。马斯克认为,避免这一结局的方法是赋予AI“极致的好奇心”和对真理的追求,而非设...

2026-10-26 08:04:52
脑机接口硬件之外壁垒何在?华超神控押注NeuroAI进化能力

脑机接口硬件之外壁垒何在?华超神控押注NeuroAI进化能力

2026年9月,华超神控的FUS-Neuro闭环超声脑机神经调控系统通过医疗器械型式检验,加速进入多个适应症临床阶段。但这家公司对自己的定义并非“超声脑机设备制造商”。创始人李昕表示:“设备只是它现在的身体,NeuroAI才是它的灵魂。”NeuroAI是构建在非侵入式超声脑机系统之上的智能技术体系,负责把“读脑—解码—写脑”连成可个体化、可迭代的闭环平台。 非侵入超声脑机是典型跨学科工程,需同时...

2026-10-26 09:23:40
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部