端侧Agent提速5倍,扩散模型或两年内取代GPT

端侧Agent提速5倍,扩散模型或两年内取代GPT

AI 资讯 来源:新闻/公众号 发布时间:2026-09-02 19:12:51 预计阅读 4 分钟

近日,扩散语言模型团队扩散智能DiffuSpace与亚洲智能体计算平台公司Acrab联合测试显示,在端侧场景中,dLLM可将Agent运行速度提升约5倍。双方计划加速推进该技术在AI PC、智能汽车、机器人及智能家居等场景落地。这一成果让扩散模型在端侧AI的潜力再次成为焦点。

扩散语言模型(dLLM)凭借“全局生成”特性,被视为下一代通用人工智能基础模型的重要方向,甚至被预测“或将在两年内替代GPT类自回归模型”。与GPT类模型“从左至右逐个Token生成”不同,dLLM借鉴图像扩散机制,先形成全局框架,再并行修正,可实现5至10倍推理加速。

端侧加速:从理论到实践

在端侧AI上,传统自回归模型每次仅生成一个Token,难以利用芯片并行算力;扩散模型则可同时处理多个位置,将并行计算能力转化为实际速度。Agent场景中,一次完整任务需多次调用模型,延迟会累加,5倍提速可显著缩短任务时间。以AI PC为例,本地Agent可并行推演多个相关步骤并实时调整。

关于端侧优势,DiffuSpace表示,端侧推理通常只服务本地用户,且对响应速度敏感,扩散模型的加速优势在此最为明显。速度优势来自同时生成多个Token,更贴近人类思考过程。以代码任务为例,扩散模型每步可生成7到10个Token,直接提升效率并降低成本。

技术底蕴与团队背景

扩散智能DiffuSpace由港大NLP实验室联合主管孔令鹏教授及博士生龚珊三、叶佳成创立,核心团队在dLLM的“条件生成、离散信号建模、Scaling”三大核心问题上均有全球领先突破。2022年团队推出DiffuSeq,开创扩散模型处理序列到序列文本生成路径;2025年推出的Dream 7B模型首次全面超越同参数规模自回归模型,规划能力比肩671B的DeepSeek V3。

在Agent体验上,扩散模型可根据用户修改自适应调整后续内容,保留有效部分,仅改写受影响内容,使模型更可编辑、灵活。长远看,扩散模型擅长全局搜索和多样性探索,可能提高找到正确解法的概率,减少陷入局部最优,对RSI研究和探索有利。

成本与挑战:产业化的现实考量

关于训练成本,DiffuSpace解释,扩散模型训练时需看到更多噪声和位置组合,可能需更多训练轮次,但推理阶段获得更高并行度。模型只训练一次却服务大量用户,整体划算。现阶段也可通过adaptation继承自回归模型参数,降低Scaling成本。

对于产业应用挑战,DiffuSpace承认模型、数据、算力、工程和生态各环节均有困难,如扩散语言模型的算子、推理系统和基础设施尚不完善。但进入该领域的人正在增多,开源项目涌现,生态将逐步完善。

关于替代时间,DiffuSpace认为,扩散语言模型获得资金投入和研究时间尚短,但已获越来越多关注。今年四季度将发布新款模型,明年计划将参数规模扩大一个数量级。未来一到两年内,扩散语言模型很有可能替代自回归模型,尽管这是激进目标,仍有很多工作需完成。

从端侧5倍提速到全局生成的可编辑性,扩散模型正以独特路径挑战自回归的统治地位。随着生态完善和算力适配,这场技术范式变革或许比预期来得更快。

标签: AI 资讯 AI

更多推荐阅读

黄仁勋放话断供不负责任AI客户,算力治理争论升温

黄仁勋放话断供不负责任AI客户,算力治理争论升温

10月14日,英伟达CEO黄仁勋接受彭博社采访时被问及,若有客户不负责任地开发AI,英伟达是否会停止供货。他回答:“这是一个假设,但答案是‘会的’。”让算力供应方充当AI治理关口,研究界已讨论多年。2023年,研究者Janet Egan和Lennart Heim提出算力提供方可参照金融业“了解你的客户”规则,核实大规模算力用户身份和用途,保存记录并上报可疑情况。英伟达占AI训练芯片市场约九成份额,...

2026-10-21 08:20:29
具身智能新玩家YITA伊塔动力融资破亿

具身智能新玩家YITA伊塔动力融资破亿

ZP独家获悉,具身智能操作平台与动力系统公司「YITA Dynamics伊塔动力」宣布完成超亿元种子和种子+轮融资,由经纬创投、商汤国香资本、建银国际、L2F光源创业者基金、银河通用、傅利叶智能联合投资,光源资本担任孵化方和独家财务顾问。 YITA取自希腊字母Eta(η),在新一代强化学习与数据驱动控制范式中代表学习率,在动力、传动与能源系统中代表效率。公司旨在以智能学习效率和物理传动效率为核心...

2026-10-21 09:57:24
图灵奖得主同台,清华系黑马亮出物理AI王牌

图灵奖得主同台,清华系黑马亮出物理AI王牌

10月20日,首届2026物理AI与世界模型大会在南京国际博览中心开幕。图灵奖得主杨立昆与姚期智视频连线,沈向洋、于海斌两位院士发表主旨演讲。成立仅三年、累计完成9轮融资的清华系公司千诀科技,由创始人高海川在开幕式主论坛发布面向真实物理世界的具身智能大脑底座——Polibrain预测式世界模型。其技术底牌源于千诀联合清华大学团队围绕“隐变量可辨识性”发表的公开成果,比LeCun团队同类工作早约一年...

2026-10-21 08:01:48
OpenAI急推300亿美元融资,抢在Anthropic IPO前锁定金主

OpenAI急推300亿美元融资,抢在Anthropic IPO前锁定金主

OpenAI正加速推进约300亿美元融资,目标估值超1.4万亿美元,试图在竞争对手Anthropic预计11月中旬IPO前锁定投资者。软银、阿布扎比MGX及其他现有投资方正洽谈参与。 两家前沿AI实验室正争夺同一批投资者。OpenAI上周与多头基金和主权财富基金会谈,Anthropic同期举办投资者日活动。知情人士称,OpenAI希望在Anthropic财务披露前完成融资,避免被直接比较。有律师...

2026-10-21 08:53:21
DeepSeek开源自家印钞机级推理框架DeepInfer

DeepSeek开源自家印钞机级推理框架DeepInfer

昨天,DeepSeek 开源了支撑自家百亿级调用的云服务推理框架 DeepInfer,以及生产级分词组件 deepseek-recipe,均采用 Apache 2.0 协议。官方表示,未来新模型的推理代码和性能优化也会持续在 DeepInfer 中开源。 基于 DeepInfer,DeepSeek 单一集群服务吞吐已达每天 155 万亿 Tokens,按最低价格计算,整体收入约每卡每小时 38 ...

2026-10-21 09:59:40
拒绝上下文崇拜的AI墨水屏Flowtica再融数千万

拒绝上下文崇拜的AI墨水屏Flowtica再融数千万

AI 墨水屏赛道正在起势。AI 硬件品牌 Flowtica 完成数千万人民币新一轮融资,由祥峰资本领投,源码资本、五源资本及清水湾基金等老股东跟投。其 AI 墨水屏产品 Verso 已于 9 月在 IFA 宣发,并正式在海外开启定金预售,将于 12 月交付首批产品。 Verso 是一块 78 克、6.5 毫米厚的磁吸墨水屏,贴在手机背面。开会时按一下开始录音,实时转写、实时总结,结束录音时自动生...

2026-10-21 08:02:57
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部