287亿参数音视频模型开源,单卡30秒生成5秒视频

287亿参数音视频模型开源,单卡30秒生成5秒视频

AI 资讯 来源:新闻/公众号 发布时间:2026-10-14 18:24:26 预计阅读 4 分钟

AI视频生成算力成本高昂,批量制作时反复生成、修改和重试的开销会不断累积。Agnes开源的音视频生成模型Agnes-Video-2.0-MoE针对推理效率进行探索:单张H200 GPU约30秒生成5秒视频,推理速度较Dense模型提升约20%,较同类MoE模型快2倍以上。其思路是将Dense模型改造成MoE以扩大容量,再通过专家剪枝缩小实际计算量。

Dense 改 MoE、剪枝再提速:Agnes 开源 287 亿参数音视频生成模型

团队以约153亿参数的DaVinci-MagiHuman预训练音视频生成模型为基础,保留大部分结构,将40层网络中间32层的部分计算模块各扩展为三个专家网络。路由机制每次只选一个专家参与计算,使总参数量达约287亿,而每次激活参数量仍与改造前约153亿相当。这为已有Dense模型的架构转换提供了参考路径,开发者可利用已训练好的网络建立专家,不必从头训练新模型。

Dense 改 MoE、剪枝再提速:Agnes 开源 287 亿参数音视频生成模型

不过,每个专家仍与原来网络一样大,路由选择还带来额外开销。Agnes下一步通过EENP(弹性专家神经元剪枝)精简专家内部计算。EENP先分别评估专家内部计算通道对视频、音频和文字的贡献,再统一尺度、按权重合并结果,据此保留重要通道,删除贡献较小的通道及相关参数,缩小矩阵运算规模。Agnes还调整去噪步骤的计算安排,提供Quality和Fast两种配置:Quality保留更多重要通道,侧重质量;Fast选用贡献较高的一部分,加快处理。模型在更关键的去噪步骤使用Quality,其余步骤使用Fast,两种配置共用一份权重,无需加载两套模型。

Dense 改 MoE、剪枝再提速:Agnes 开源 287 亿参数音视频生成模型

实验中,EENP“60%剪枝”配置下,模型平均激活参数量降至约117亿,去噪耗时从未剪枝版本的26.83秒降至20.92秒,减少约22%;相比原Dense模型,去噪耗时减少约13%。但效率提升伴随质量取舍:在VBench-2.0评测中,剪枝后模型得分约为未剪枝MoE的92.4%。低运动场景中人物身份与构图仍较稳定;高运动场景下,随着剪枝加深,手部、工具边缘等细节更易退化。这提示开发者需结合内容类型选择推理配置。

Agnes近期还有另一成果:其视频模型Agnes Video 2.5进入Artificial Analysis视频综合榜全球前十。Agnes Video 2.5的720p视频API基础价格为每秒0.025美元,1080p默认配置参考价格为每分钟2.4美元。旗下视频创作平台Pavo每天赠送200积分,可用于体验Agnes Video 2.5,平台上的Agnes Video 2.5 Flash可免费使用。综合API接入和Pavo平台内部使用情况,Agnes视频模型日均调用生成时长已达560万秒,约合1556小时;抖音平台中Pavo相关话题量超过3亿。

整体而言,MoE解决扩展容量与按需调用问题,EENP进一步减少专家内部计算,两者协作形成连续优化路径。Agnes对视频模型的MoE改造换来了实际生产力提升,开源后创作者有机会从中受益。

标签: AI 资讯 AI

更多推荐阅读

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

被称“最无聊机器人”的Dyna,靠叠衣服找到机器人Scaling Law

《纽约邮报》曾称Dyna Robotics为“全世界最无聊的机器人”,而公司创始人认为这是“对一家机器人公司最高的赞美”。Dyna-1主攻叠毛巾、叠衣服;新发布的Dyna-2让机器人Taku进入洗衣房,完成放脏衣服、操作洗衣机、取出送烘干机、折叠放架等流程。联合创始人Jason Ma表示,机器人真正开始工作本就应是“无聊”的,真实部署是衡量机器人的“唯一评估”;机器人不能落地,不是因为没有腿或手,...

2026-10-20 09:48:01
前剪映负责人做视频Agent获千万美元融资

前剪映负责人做视频Agent获千万美元融资

视频Agent赛道出现新玩家Pexo,与采用画布工作流的产品不同,Pexo将剪辑和视频整合在产品中,支持用自然语言对话创作视频。公司已获千万美元天使轮融资,此前于2025年10月获得数百万美元投资。创始人廖谦曾任生数科技产品副总裁、Vidu产品负责人,也曾在腾讯、字节跳动任职,从技术研发转向AI产品与商业化,先后从0到1搭建火山引擎智能创作云,并在剪映/CapCut发起海外AI内容平台Pippit...

2026-10-20 09:26:14
DeepSeek搜索卷起来后,前负责人创业做全网捞人

DeepSeek搜索卷起来后,前负责人创业做全网捞人

近日,DeepSeek开放了自研网页搜索接口,披露该引擎每天处理全球数亿次请求,已收录千亿级网页,正将搜索能力开放给更多开发者。 在搜索对象中,人物信息最为特殊,难点在于把零散线索拼到同一个人身上。Simplex AI创始人张博曾任DeepSeek-VL项目负责人,其团队推出的Lev8主要面向GTM,人物搜索是流程起点。用户用自然语言描述目标,系统即寻找符合条件的对象,结合公开资料判断匹配度,生...

2026-10-20 08:09:15
蚂蚁领投!清华系AI创企熵简科技完成C轮融资

蚂蚁领投!清华系AI创企熵简科技完成C轮融资

智东西10月19日消息,北京AI金融创企熵简科技宣布完成C轮融资,由蚂蚁集团领投,东方国信与乔贝资本跟投。融资后,蚂蚁集团将与熵简科技在AI金融智能体研发、AI金融垂域模型训练等领域展开深度合作。 熵简科技成立于2017年,主要依托大数据、云计算、人工智能等技术,打造全资产、全流程的端到端智能资产管理平台。公司名称源自热力学第二定律中度量系统混沌程度的“熵”,“熵简”寓意通过AI降低金融投研的复...

2026-10-20 09:26:26
Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

Anthropic预言奇点已至:2030年美国GDP或飙至44万亿美元

在曼谷举行的国际货币基金组织佩尔·雅各布森讲座上,Anthropic联合创始人Jack Clark提出判断称“奇点已经到来”,即技术进步速度已甩开人类理解和跟进的能力。他预测,在奇点驱动下,到2030年美国GDP将升至44万亿美元。按常规推演,该数字为33.5万亿美元,奇点带来15.4%的额外GDP,平均每年约6%的GDP增长;到2030年前后,累积生产率提升与资本积累将把美国年化经济增长率推高至...

2026-10-20 08:36:21
港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

港科大CMU联手开源新模型:KV Cache砍掉99%,单卡吞吐飙6倍

谷歌一篇论文提到KV Cache至少能压缩6倍,曾引发美光等存储芯片巨头股价下跌。几个月后,岩山科技旗下岩芯矩阵联合港科大、CMU等高校发布并开源EdgeRock-4B,对KV Cache的处理更进一步:上下文从4K扩展到256K,KV Cache占用始终固定在72MiB,相比源模型减少99.1%。一张80GB显卡可同时跑512路长推理,输出吞吐达12124 tokens/s,是源模型的6.42倍...

2026-10-20 23:25:26
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部