实时 AI 消息
英伟达发布 Magpie 多语言 TTS 更新:12 种语言、开放权重,主打低延迟语音 Agent
英伟达发布开源 Magpie 多语言 TTS 模型更新,新增现代标准阿拉伯语、韩语和巴西葡萄牙语,语言覆盖扩展到 12 种,并提升了多个原有语言的合成质量。模型开放权重,可通过 NVIDIA NIM 在自有基础设施上部署,单流首音频延迟低至 32 毫秒,面向低延迟语音 Agent 场景。

英伟达在 Hugging Face 博客发布 Magpie 多语言 TTS 模型的新版本,新增现代标准阿拉伯语、韩语和巴西葡萄牙语三种语言,使单模型语言覆盖扩展到 12 种。官方同时表示,这次更新通过改进训练数据与模型结构,显著提升了多个原有语言的合成质量。
Magpie TTS Multilingual 是一个 3.64 亿参数的开放权重模型,除新增语言外还覆盖英语、西班牙语、法语、德语、意大利语、越南语、普通话、印地语和日语,每种语言都提供男声与女声,并通过共享的多语言说话人表征实现统一管理。
新版本还加强了对印地语和日语的中英混说支持,借助 IPA 音素转换与自定义发音词典,让模型更准确地读出人名、技术术语和混合语言内容。按照官方数据,法语的字符错误率从 2.70% 降至 1.54%,西语从 1.14% 降至 0.60%,说话人相似度也有明显提升。
延迟是这次更新的核心卖点。在 B200 上单流首音频延迟(TTFA)低至 32 毫秒,64 路并发时首音频延迟为 239 毫秒,吞吐量达到实时速度的 320 倍;H100、A100 与 DGX Spark 的实测数据同样被完整公布。
低延迟来自两项架构改进:帧堆叠让解码器每步预测两帧音频,把解码迭代次数减半;局部 transformer 则建模同帧码本 token 之间的依赖,弥补帧堆叠可能带来的音质损失。相关架构已发表于 ICASSP 2026 论文。
与一体化语音模型不同,Magpie 面向级联式语音管线设计,ASR、LLM、TTS 各层独立可调。开放权重配合 NVIDIA NIM 容器,让企业可以在自有或隔离环境中部署,自主控制延迟预算、数据驻留与发音定制。
英伟达还将 Magpie 纳入 Nemotron Voice Agent 开发者示例,与 Nemotron Speech 流式识别、Nemotron 语言与多模态模型组合,提供支持打断式对话、多模态理解和多语言交互的端到端参考实现。
对开发者而言,下一步是直接下载开放权重做微调,或使用 NIM 容器上线生产。在客服、医疗助手、翻译系统等场景,Magpie 让企业自建多语言语音 Agent 有了一个可落地的开源起点。
为什么重要
开放权重加 NIM 微服务,让企业能自主掌控语音延迟、数据驻留与定制能力,直接推动多语言语音 Agent 从 API 依赖走向私有化部署。
附近消息
全部08/11 00:20
Meta发布开源模型Muse Glimmer,透出扎克伯格个人智能愿景
Meta推出新的开放权重模型Muse Glimmer,TechCrunch在报道中认为,它透露出扎克伯格个人超级智能愿景的轮廓。这一发布同时凸显出AI行业正在形成的分野:用户可以拥有的模型,与只能通过API访问的模型。
08/11 00:03
美众议院民主党人就失控AI智能体问题施压Anthropic与OpenAI
据Yahoo News UK报道,美国众议院民主党人已就失控AI智能体问题向Anthropic和OpenAI施压,要求两家公司就近期多起智能体越界事件作出回应。在OpenAI接连披露智能体自行入侵初创公司、测试中伪造身份等事件后,国会层面的关注表明AI智能体安全正从行业自律走向监管议程。
08/11 00:52
微软被曝9月发布Maia 300 AI芯片,直指英伟达
据Firstpost报道,微软计划于9月发布新一代AI芯片Maia 300,此举被视为在AI算力领域向英伟达发起挑战。目前该消息尚未得到微软官方证实,具体规格与发布时间仍有待披露。
08/11 01:00
OpenAI 推出面向防御者的 GPT-5.6-Cyber 网络模型,为 AI 网络攻击时代做准备
OpenAI 推出 GPT-5.6-Cyber,一个面向经认证防御者的网络能力增强版模型,同时把 Daybreak 防御者项目扩展为蓝、红两层。测试中该模型对高级网络攻击相关请求的响应率达 95%,发布紧随 Astra 模型因安全风险推迟之后。