蚂蚁开源5款语音模型,AI复刻甄嬛传名场面

蚂蚁开源5款语音模型,AI复刻甄嬛传名场面

AI 资讯 来源:新闻/公众号 发布时间:2026-10-21 18:44:38 预计阅读 5 分钟

智东西10月20日报道,蚂蚁百灵今日开源Ming-3.0语音系列模型,共五款,覆盖语音合成、音频理解与对话、语音识别,重点支持音色与台词表演控制、长音频分析与连续问答,以及结合热词和对话上下文的语音识别。

语音合成系列包括Ming-3.0-tts-0.5B和Ming-3.0-tts-tiny,后者支持长篇多角色播客生成;音频理解与对话系列包括Ming-3.0-audio-flash和Ming-3.0-audio-tiny,面向会议、访谈等录音分析;语音识别模型为Ming-3.0-asr-tiny,支持中英文及方言转写。

蚂蚁一口气开源5款语音模型!我们用它扒了《甄嬛传》滴血验亲名场面

亮点方面,0.5B参数的TTS模型可根据文字指令调整声音表演,用户能要求台词表现克制的愤怒、指定重读和停顿,还可在句中插入笑声和叹息。Audio系列可直接分析录音,在理解对话内容的同时保留语气、说话人特征和环境音等信息;ASR模型支持提前传入地名、产品名等热词及对话上文,辅助识别专业术语和同音词。

目前Ling Studio网页端仅开放Audio系列体验。智东西实测显示,Ming-3.0-audio-flash能结合长对话分析人物性格、立场及言外之意,准确定位背景声音出现时间。在《甄嬛传》“滴血验亲”22分15秒录音测试中,模型约一分钟给出人物分析,对皇上、皇后、祺贵人等主要人物性格和立场判断较到位,并分析出皇后借验亲制造假证据的目的,但对甄嬛复杂人物的分析仍流于表面。模型约6.6秒准确回答弘曕在3分18秒左右开始哭泣,与录音吻合。

蚂蚁一口气开源5款语音模型!我们用它扒了《甄嬛传》滴血验亲名场面

五款模型权重已在Hugging Face和ModelScope开放。开发者可通过API调用Ming-3.0-tts-0.5B、Ming-3.0-audio-flash和Ming-3.0-asr-tiny。

语音合成方面,Ming-3.0-tts-0.5B在Artificial Analysis英文发音鲁棒性测试中以93.2%与Fish Audio Drama 3 Preview并列第一,高于Eleven v4和Gemini 3.8 Flash TTS;在Controlled Voice榜单位列开放权重模型第一,Provider Voice榜单位列开放权重模型第三。Ming-3.0-tts-tiny在德语、西班牙语词错误率上领先对比模型,但两款TTS在音色设计测试中均低于Qwen3-TTS。

蚂蚁一口气开源5款语音模型!我们用它扒了《甄嬛传》滴血验亲名场面

音频理解方面,Ming-3.0-audio-flash以99.40分语音推理成绩领先字节Seed 2.0 Lite、小米MiMo-V2.6-Pro、阿里Qwen3.8-Omni-Flash和谷歌Gemini 3.8 Flash,综合音频理解成绩仅次于千问,语音问答与指令遵循仅次于Gemini,语音工具调用位列第三。

语音识别方面,Ming-3.0-asr-tiny在领域、方言及中英文四类评测中平均错误率4.41%,低于阿里通义Fun-ASR 1.5、小红书FireRedASR2-LLM(8B)及阿里Qwen3-ASR-1.7B;领域和英文识别错误率最低,方言识别略逊于Fun-ASR 1.5,中文识别不及FireRedASR2-LLM(8B)。

官方案例显示,Ming-3.0-tts支持通过自然语言控制情绪、节奏和重音,并可用标签指定笑声、叹息、咳嗽等声音位置。Ming-3.0-asr-tiny可结合热词列表和对话上文识别人名、地名和行业术语,官方以粤语问路场景演示,预先传入“佐敦道、弥敦道、波鞋街、西洋菜街”等热词后,模型将录音转写为“弥敦道怎么走?”。该模型已用于阿福医生助手、支付宝搜索、蚁小保实时语音对话和安全核身等场景。

蚂蚁百灵透露,下一步将探索语音智能体,支持用户通过多轮语音对话提出需求、发起任务和查询进展。

标签: AI 资讯 AI

更多推荐阅读

马斯克警告AI将“一击拿下”人类,同日Grok登陆iPhone

马斯克警告AI将“一击拿下”人类,同日Grok登陆iPhone

一天之内,马斯克霸占三个热搜:警告超级智能将“一击拿下”人类、Grok Bot接入iPhone操作按钮、亲自发文“聘请”Grok。 马斯克警告:“很多人会被超强说服力的超级智能一击拿下,可能也包括我。”他用的词是“One-shotted”,即满血状态被一击秒杀。过去AI威胁论多指物理毁灭,这次他点出更致命的维度:认知劫持。超级智能拥有全人类数据,能瞬间分析出人的性格弱点、情绪状态和价值观偏好,用...

2026-10-21 08:40:39
AI圈“天才娇妻文学”该停了:田柯宇案再引争议

AI圈“天才娇妻文学”该停了:田柯宇案再引争议

最近国内AI圈的一些新闻引发关注,尤其是部分科技媒体喜欢将年轻AI研究者、创业者包装成不被世俗理解的天才。一个人做出重要成果、年纪轻轻拿到巨额融资,就被称为天才;甚至做出明显不符合职业道德的事情,只要后来取得不错成绩,也会被解释为天才特有的行为逻辑。 田柯宇事件成为典型例子。他曾因干扰字节跳动内部模型训练任务被辞退,今年创业拿到近3000万美元融资,投后估值达2亿美元。但他与字节跳动的官司尚未结...

2026-10-21 22:58:31
华为物理智能体打通AI科研实验室实操闭环

华为物理智能体打通AI科研实验室实操闭环

如何把屏幕上罗列的实验流程准确变成一连串实际操作?这个问题直指 AI 科研落地的核心门槛:AI 能输出可行实验方案,却很难自主完成整套线下实操。华为 openJiuwen 团队联合算力平台公共事业中队,以电催化场景为例,打通大模型与底层物理设备之间的交互,成功将实验方案下发到物理设备执行。关键底座之一是 openJiuwen 旗下的 Jiuwen Symbiosis 物理智能体。 以常规实验指令...

2026-10-21 22:26:52
WorkBuddy+Miora再升级:海报、IP、宣传片一站式搞定

WorkBuddy+Miora再升级:海报、IP、宣传片一站式搞定

WorkBuddy将设计Agent Miora融入产品后,作者此前分享的WorkBuddy+Miora做AI短片内容获得6.6万阅读、1.1万转发。此次作者转向海报、IP形象、品牌宣传片方向,指出模型生成设计容易趋于“平均值”,而真实工作需求是主海报、社媒配图、短视频等多尺寸、风格统一且真正高级的成套物料。为此作者将审美和流程写进Skill,开源了3个适配WorkBuddy+Miora的新Skil...

2026-10-21 21:38:38
奥特曼曝AI终局:要么合并,要么熔掉所有GPU

奥特曼曝AI终局:要么合并,要么熔掉所有GPU

在上周OpenAI全员大会上,奥特曼提出AI终局的三条路径,其中两条最为激进:一是OpenAI、Anthropic、谷歌等主要AI实验室合并为同一超级机构,统一研发并向合作国家分发新模型;二是一家公司率先实现递归自我改进(RSI),凭此获得经济实力,掐断其他开发者算力,“熔掉其他所有人的GPU”。 合并设想并非首次出现。2023年11月奥特曼被罢免后,董事会曾接触Anthropic CEO达里奥...

2026-10-21 20:59:01
Claude爆冷登顶机器人角斗场,GPT-6与Gemini集体翻车

Claude爆冷登顶机器人角斗场,GPT-6与Gemini集体翻车

如今,AI正式进入物理世界。在具身智能仿真评测平台RoboColiseum上,GPT-6 Astra、GPT-6.1 Sol、Claude Opus 5.5和Gemini 4 Argon四款顶尖多模态大模型接入统一控制框架Agent2Act,在相同任务和指令下接受评测。 综合榜单中,Claude Opus 5.5以76.28%的总分位居第一,GPT-6 Astra以75.99%紧随其后。在“指令...

2026-10-21 20:23:00
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部