DeepL 11 月 11 日发布语音翻译模型 Aure,官方称是其「最自然」的语音 AI 翻译模型。以往 DeepL Voice 只根据对话开头的一小段声音确定译音的音色,之后语气固定;Aure 改为持续分析原声和译文,实时让译出的语音跟着说话人的语气、情绪、重音和语速变化,连反讽这类「语气和字面相反」的表达也能带过去,同时保留本人可辨认的音色。它已自动应用于 DeepL Voice 在线会议、面对面对话和 DeepL 语音 API,无需额外配置;首批支持英、德、西、法、意、日、葡、韩 8 种语言,中文暂不在列。

核心要点速览

  • ✓变化:从「开场取一次声音样本」改为持续分析原声与译文,译音实时跟随语气、情绪、重音和语速
  • ✓音色:建立在 DeepL 此前的声音保留技术之上,译出的仍是本人可辨认的声音,并尽量不夸大口音
  • ✓训练:分离音色、韵律与内容三部分分别迁移,再用强化学习兼顾译文准确度与语音自然度(官方口径)
  • ✓可用:自动应用于 DeepL Voice 会议、面对面对话和 Voice API,无需额外配置
  • ✓语言:首批 8 种(英德西法意日葡韩),中文不在首批;官方未公布延迟或评测数据
DeepL 发布语音翻译模型 Aure:实时跟随说话人的语气、情绪、重音和语速,保留本人音色,自动上线 DeepL Voice 与语音 API,首批 8 种语言
🖼️要闻配图
点击全屏高清查看
🧭

把技术选型换算成你的开发预算

40 款主流编程套餐横向比价,支持输入/输出 Token 真实账单模拟

🔬

深度技术解析与实战评估

核心背景与行业痛点

实时语音翻译过去主要比「译得对不对、快不快」,但人说话时语气一直在变:同一句话急着说、慢慢说、带笑说,意思可能完全不同。DeepL 此前的做法是用对话开头的几秒声音生成译音,能保留「谁在说」,却跟不上「怎么说」,遇到情绪起伏、强调或反讽就会变得平淡甚至误导。这在谈判、客户沟通、跨国团队会议里是实际痛点。

架构亮点与底层机制

Aure 改成持续分析:同时看原始音频和译文,逐句决定译音该怎么读。官方提到三个难点:真实对话有噪音、回声和失真,要先把说话人的音色与韵律剥离出来;跨语言保留音色比同语言难,还不能把口音放大;DeepL Voice 不永久存储会议转写,会话结束即从内存删除,缺少同一人跨语言说话的数据,所以模型要在一句话没说完前就实时适应说话人。DeepL 的做法是把音色、韵律和内容拆开分别迁移,再用强化学习兼顾译文准确度和语音自然度。

权威 Benchmark 与实测跑分对比

DeepL 这次没有公布延迟、MOS 评分或与其他语音翻译产品的对比数据,所有效果描述都来自官方新闻稿和演示视频,尚无第三方评测。目前 X 上的讨论热度不高,官方帖互动较少,效果还需用户实测验证。客户方面,官方点名 Pioneer、Aramark、Avendra International、Inetum 等企业在用 DeepL Voice。

开发者实战落地与开箱指南

已在用 DeepL Voice 或 DeepL 语音 API 的团队不需要改任何配置,Aure 会在支持的 8 种语言里自动生效;其他语言继续走原有语音模型。做跨国会议、客服或现场口译类产品的开发者,可以用英日、英韩、英德这类语言对先试,重点听情绪变化和强调是否被正确带过去。需要中文的场景暂时还用不上。

实战指南准备好将技术转化为生产力?

即刻查看该技术对应模型与主流工具的实测差异,或一键测算团队 API 调用与 $20/月套餐盈亏平衡点。

接着读Unreal Engine 5.9 MegaJam Preview 上线:首个主要由 AI Agent 构建的 UE 版本,编辑器内直连 Claude Code / Codex / Cursor,Unreal MCP 随编辑器自启,项目可跑在浏览器
立即阅读→