智谱AI智能体两周让10万卡集群吞吐暴涨200%

智谱AI智能体两周让10万卡集群吞吐暴涨200%

AI 资讯 来源:新闻/公众号 发布时间:2026-09-18 20:10:21 预计阅读 5 分钟

RSI的最小闭环已经出现。智谱创始人兼首席科学家唐杰在X平台发表长文,首次曝出智谱在递归自我改进(RSI)领域的最新成果:在超过10万卡国产芯片组成的集群上,由GLM-5.3驱动的Infra Agent参与搭建了支撑GLM-5.3 Flash研发的生产级推理服务,仅用不到两周就完成从模型适配到生产可用的进化,将端到端吞吐提升至初始基线的3倍。唐杰认为,虽然距离递归式自我改进还很遥远,但最小闭环已经存在:模型优化系统,系统服务于模型。

智谱唐杰突发长文曝RSI进展:Agent优化10万卡集群吞吐暴涨200%,AI造AI还远吗?

RSI是AI自我进化的前沿探索,也是智谱未来研发的重要方向。9月13日,智谱宣布完成约50亿美元融资,约60%将用于下一代GLM基础模型和完全自训练体系研发,以及大规模训练、生产推理、算力资源和相关技术基础设施的部署与升级,最终逐步形成RSI。智谱认为,若这一趋势延续,给足算力与时间,终点是一个能够完全自主设计并训练出自己继任者的系统。同时,智谱去年已启动安全能力增强研究,合作伙伴用GLM在真实代码库中发现数千个漏洞,并设置受信访问计划,确保能力被负责任地使用。

智谱唐杰突发长文曝RSI进展:Agent优化10万卡集群吞吐暴涨200%,AI造AI还远吗?

GLM-5.3-Flash的上线经历了从让模型在新硬件上运行,到构建稳定承载生产流量的高性能推理服务的完整过程。此前没人成功部署过如此大规模的国产卡集群,面临芯片内存容量和带宽受限、需支持1M上下文窗口和多模态请求、生态不成熟、算子不完备等挑战。最终完成这项工作的不是一支团队,而是GLM-5.3驱动的Infra Agent。GLM-5.3-Flash以匿名模型Ox-Alpha在OpenCode与OpenRouter上接受真实调用检验,上线一周成为双平台调用量最大的模型,6天token调用量超过62万亿。

智谱唐杰突发长文曝RSI进展:Agent优化10万卡集群吞吐暴涨200%,AI造AI还远吗?

团队实施了一系列激进的内存优化,包括以算力换带宽、以通信换显存等定制化方案。技术栈融合了针对线性注意力和LM Head的节点内张量并行、ReplaySSM、W8A8量化、INT8/FP8/BF16混合精度缓存量化,以及Layer Split等,并引入Encode–Prefill–Decode(EPD)分离式架构,实现端到端服务性能约3倍提升,硬件利用效率与单Token成本均达到主流NVIDIA GPU的相当水平。

智谱认识到,决定Infra Agent工程效果的不仅是模型自身的代码生成与推理能力,更取决于系统能否持续提供有效、可归因的反馈。代码库只能提供静态上下文,而推理系统中的精度异常、性能退化往往来自算子实现、并行策略、通信行为、内存管理与服务调度等多个层面的动态交互。端到端指标只能告诉Agent“结果变差了”,却无法解释“为什么变差”。因此需要将稀疏的端到端结果转化为细粒度、可归因且能直接指导下一步行动的工程反馈。

为此,智谱将正确性测试、运行日志、执行Trace、运行时事件、微基准测试和端到端指标纳入Agent迭代流程,把系统优化过程拆分为可局部观测和验证的环节,称为“稠密反馈”。其强调三个特征:反馈足够局部,能关联到具体引擎启动参数、代码、算子、输入条件等;反馈能低成本、及时获得,缩短验证周期;反馈支持客观验证,通过控制变量对照实验确认根因。局部验证用于尽早排除错误修改,端到端测试确认局部收益能否转化为真实服务收益。

GLM-5.3 Flash的上线过程形成了由工程师、Infra Agent和实验环境共同组成的优化闭环:工程师定义目标与系统边界,Agent负责分析、假设和修改,实验环境提供分层、及时且可验证的反馈。这一演进既包含直接推动吞吐增长的性能优化,也包含决定系统能否正确稳定上线的缺陷修复。例如,在算子验证过程中,团队发现了KDA算子上下文并行路径的精度问题,CP与非CP结果之间的偏差使检查重点落到并行执行引入的状态传播与合并计算上。

标签: AI 资讯 AI

更多推荐阅读

卡帕西两小时用Claude复刻YouTube,打造专属推荐流

卡帕西两小时用Claude复刻YouTube,打造专属推荐流

周五晚11点,Karpathy打开YouTube想找视频,首页却全是夸张封面和看过多次的老话题。次日他打开Claude,仅用两小时、以Claude Opus 5.5的Medium推理强度,做出了一个YouTube风格网站HackerTube(hackertube.org)。网站复刻了YouTube网页布局:左侧导航栏显示点赞、历史、稍后再看,右侧推荐流保留封面大小、发布时间和播放量。他的提示词只有...

2026-11-02 09:11:07
AI影视创作进入自动挡:AniShort推出本地智能工作台

AI影视创作进入自动挡:AniShort推出本地智能工作台

视频制作进入自动挡。今年以来,AI影视剧的发展速度明显加快。8月底,国内首部AIGC长剧《后西游记》登陆湖南卫视和芒果TV,截至9月5日,正片播放次数已达1.5亿次。10月23日,100分钟的AI院线电影《三星堆:未来往事》正式上映,制作团队累计生成超过120万张素材图片,并对影片进行了上百次修改。与此同时,剧集产量快速增加,如何让剧本、分镜、视频生成及后期剪辑顺畅衔接,成为创作者需要解决的问题。...

2026-11-02 08:25:00
全双工实时交互系统MOSS-Live发布,多项指标排名第一

全双工实时交互系统MOSS-Live发布,多项指标排名第一

过去几年,AI 语音技术从语音识别到语音合成进步明显,与 AI 进行语音交流已不新鲜。但真正当作《Her》中的 Samantha 来聊,问题很快暴露:AI 常搞不清何时该说话、何时该闭嘴。用户未说完它可能抢答,随口应一声「嗯」被误判为打断,聊到一半让它查资料,对话又陷入等待。AI 越来越像人在「说话」,却还不擅长真正实时自然地「对话」。这不仅涉及语音识别与生成,更涉及 AI 能否在持续交流中理解语...

2026-11-02 09:21:35
字节前员工弃千万营收,带博士团队做“Agent闲鱼”

字节前员工弃千万营收,带博士团队做“Agent闲鱼”

“个人Agent创业窗口期就到春节前。”放着千万年营收的业务不要,30多岁的北大硕士吴泽栋带着三名博士,切入最拥挤的个人Agent赛道。他曾在百度做产品,在TikTok负责美区与巴西增长。上一段AI心理创业产品Seein跑出近70万用户和千万级人民币年营收,去年底他把业务交给联创,重新打造Loopa。 国内超级App生态在前,吴泽栋绕开国内直接切入美国市场,让AI跨越各类App,替用户完成机酒预...

2026-11-02 09:37:59
00后清北创始人开源AI视频工具20天斩获2.3万Star

00后清北创始人开源AI视频工具20天斩获2.3万Star

“你要不要上车?”最近,AI应用赛道杀出一匹黑马Hypit.ai,号称能“一键复刻爆款视频”,开源一个月GitHub Star数冲到2.3万。一条用Hypit做的视频给商家带来40倍ROAS;有硅谷创业者用Hypit做完launch video后,直接辞掉月薪1500美金的剪辑师。 Hypit创始团队是两位00后——北大本科、清华辍学的陈昱东Alvin和清华计算机系毕业的金群琳Kashorin。...

2026-11-02 08:24:32
县城老板70万买AI系统被坑惨,供应商跑路老板气到住院

县城老板70万买AI系统被坑惨,供应商跑路老板气到住院

王航在陕西一座五线小城,就职于一家不足百人的软件公司。今年8月起,老板先后投入约70万元,引入一套号称能获客、做客服、做招聘、辅助决策的AI系统。部署完成后,账号接连被封,工资数据泄露,老员工陆续离职,最后连供应商都跑了,老板一度气到住院。 公司主要服务政企客户,每月有20多个稳定客户,净利40多万。老板六十多岁,连电脑都不太会操作,却是全公司AI焦虑最严重的人,常往工作群转发OPC、AI员工、...

2026-11-02 09:06:28
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部