字节世界模型首秀:一句话生成可自由探索的赛博世界

字节世界模型首秀:一句话生成可自由探索的赛博世界

AI 资讯 来源:新闻/公众号 发布时间:2026-10-13 08:15:34 预计阅读 3 分钟

只需一句话,AI就能生成一个可自由探索的三维场景。在抖音集团《2026美好奇妙夜》科技节目现场,影视飓风Tim演示了字节跳动正在研发的世界模型:输入一句话生成微缩小人视角的房间,骑纸飞机自由飞行,凭空创造勺子并与之交互,甚至用“任意门”将房间与外太空连通。该模型尚未正式发布,但已展示出三维场景生成、自由探索、实时交互、物体编辑及跨空间连通能力。

AI从「造图」卷到「造世界」,这次真有点科幻了。。。

近年来,从李飞飞团队的World Labs到Google DeepMind的Genie、英伟达的Cosmos,科技巨头纷纷布局世界模型,试图让AI理解空间结构、模拟现实规律并预测环境变化。

AI从「造图」卷到「造世界」,这次真有点科幻了。。。

传统多模态生成存在技术短板。2024年OpenAI发布Sora时指出,视频生成模型虽能涌现三维一致性和物体持久性,却难以处理基本物理关系——画面真实,物理规律却未必可靠。视觉上的时空连续性,并不等于稳定、可干预的世界状态。让杯子外观一致已相对容易,但追踪其被拿起、放下、推落时的空间位置与状态变化,并预测碰撞坠落,仍需世界状态建模。

AI从「造图」卷到「造世界」,这次真有点科幻了。。。

今年6月,李飞飞团队将世界模型按功能分为三类:渲染器负责画面真实度;模拟器维护符合几何与物理因果的场景状态;规划器基于世界状态输出合理动作。这解释了为何AI能生成逼真视频,却仍需研究世界模型——空间表征、动态预测与行动规划,正是传统多模态生成尚未充分解决的难题。

字节AI模型的演示体现了这些能力:自由穿行要求维持场景几何一致性;凭空生成勺子并攀爬,涉及即时生成、状态建模与动态预测;任意门则延伸至三维场景重建、空间可控编辑与跨场景连续性建模。AI生成的不再只是内容,而是一个持续存在、变化、交互的数字世界。

世界模型还有更具产业价值的一面:让机器在虚拟世界大规模训练、反复试错,再将能力迁移到现实。机器人、自动驾驶等物理AI长期受制于真实数据采集成本高、试错周期长、极端场景难复现。世界模型可将现实环境转化为可生成、可控制、可反复验证的虚拟训练场。

在自动驾驶Demo中,救护车驶来、行人横穿、交警指挥等复杂路况被搬进AI生成的虚拟道路,车辆可模拟行驶、应对突发状况,并通过多机位回放分析。过去依赖大量真实路测的长尾场景,如今有望批量生成并反复验证。家务机器人Demo中,机器人在虚拟家庭环境练习抓取、搬运、摆放,面对变化的物体位置与空间布局调整策略,失败也能快速复现问题、反复训练。相比现实中的操作与人工复位,世界模型让机器人以更低成本、更快速度并行试错,练就应对现实环境的能力。

标签: AI 资讯 AI

更多推荐阅读

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

《纽约邮报》曾称Dyna Robotics为“全世界最无聊的机器人”,而公司创始人认为这是“对一家机器人公司最高的赞美”。Dyna-1主攻叠毛巾、叠衣服;新发布的Dyna-2让机器人Taku进入洗衣房,完成放脏衣服、操作洗衣机、取出送烘干机、折叠放架等流程。联合创始人Jason Ma表示,机器人真正开始工作本就应是“无聊”的,真实部署是衡量机器人的“唯一评估”;机器人不能落地,不是因为没有腿或手,...

2026-10-20 09:48:01
前剪映负责人做视频Agent获千万美元融资

前剪映负责人做视频Agent获千万美元融资

视频Agent赛道出现新玩家Pexo,与采用画布工作流的产品不同,Pexo将剪辑和视频整合在产品中,支持用自然语言对话创作视频。公司已获千万美元天使轮融资,此前于2025年10月获得数百万美元投资。创始人廖谦曾任生数科技产品副总裁、Vidu产品负责人,也曾在腾讯、字节跳动任职,从技术研发转向AI产品与商业化,先后从0到1搭建火山引擎智能创作云,并在剪映/CapCut发起海外AI内容平台Pippit...

2026-10-20 09:26:14
DeepSeek搜索卷起来后,前负责人创业做全网捞人

DeepSeek搜索卷起来后,前负责人创业做全网捞人

近日,DeepSeek开放了自研网页搜索接口,披露该引擎每天处理全球数亿次请求,已收录千亿级网页,正将搜索能力开放给更多开发者。 在搜索对象中,人物信息最为特殊,难点在于把零散线索拼到同一个人身上。Simplex AI创始人张博曾任DeepSeek-VL项目负责人,其团队推出的Lev8主要面向GTM,人物搜索是流程起点。用户用自然语言描述目标,系统即寻找符合条件的对象,结合公开资料判断匹配度,生...

2026-10-20 08:09:15
蚂蚁领投!清华系AI创企熵简科技完成C轮融资

蚂蚁领投!清华系AI创企熵简科技完成C轮融资

智东西10月19日消息,北京AI金融创企熵简科技宣布完成C轮融资,由蚂蚁集团领投,东方国信与乔贝资本跟投。融资后,蚂蚁集团将与熵简科技在AI金融智能体研发、AI金融垂域模型训练等领域展开深度合作。 熵简科技成立于2017年,主要依托大数据、云计算、人工智能等技术,打造全资产、全流程的端到端智能资产管理平台。公司名称源自热力学第二定律中度量系统混沌程度的“熵”,“熵简”寓意通过AI降低金融投研的复...

2026-10-20 09:26:26
Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

在曼谷举行的国际货币基金组织佩尔·雅各布森讲座上,Anthropic联合创始人Jack Clark提出判断称“奇点已经到来”,即技术进步速度已甩开人类理解和跟进的能力。他预测,在奇点驱动下,到2030年美国GDP将升至44万亿美元。按常规推演,该数字为33.5万亿美元,奇点带来15.4%的额外GDP,平均每年约6%的GDP增长;到2030年前后,累积生产率提升与资本积累将把美国年化经济增长率推高至...

2026-10-20 08:36:21
港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

谷歌一篇论文提到KV Cache至少能压缩6倍,曾引发美光等存储芯片巨头股价下跌。几个月后,岩山科技旗下岩芯矩阵联合港科大、CMU等高校发布并开源EdgeRock-4B,对KV Cache的处理更进一步:上下文从4K扩展到256K,KV Cache占用始终固定在72MiB,相比源模型减少99.1%。一张80GB显卡可同时跑512路长推理,输出吞吐达12124 tokens/s,是源模型的6.42倍...

2026-10-20 23:25:26
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部