一、事件与模型定位
2026 年 9 月,阿里通义千问推出 Qwen3.8-LiveTranslate,定位是实时同声传译大模型。这里要先厘清它和普通翻译软件的区别:传统同传方案多半是把语音识别、机器翻译、语音合成三件套串成一条流水线,每段都要等前一段跑完,延迟层层叠加,且任何一环出错都会传染下游。Qwen3.8-LiveTranslate 走的是端到端同传路线:音频进,译文语音与双语文本同步出,中间不再显式拆成先识别、再翻译、后合成三步。这种结构上的差异,决定了它在延迟和时序一致性上有先天优势。
目前模型已通过千问 AI 平台开放 API。企业可以把实时音频流推进去,拿回双语文本和保留原说话人音色的译文语音,直接接到自己的会议系统、直播推流或客服坐席里。它不是一个只能网页试玩的演示,而是可以嵌进生产链路的接口服务。
适用面写得比较实在:跨国会议、跨境直播、视频本地化、国际展会、出海客服与培训。这类场景有一个共同点,就是不能等。人还在台上讲,译文就要跟上,否则会议断片、直播掉粉、展台冷场。同传的价值从来不是翻得美,而是跟得上、不出错、能规模化。
技术上这次有两个关键词。其一是 Interleave 架构重构:把同传重写成音频与文本交织的单流,已经听过的内容不再从头处理,已听音频与已出译文都被缓存复用。其二是 Hybrid MoE 的 Thinker–Talker 双模块,后面会专门展开。两个设计共同服务于一个目标,就是在保住翻译质量的前提下把延迟压下来。
硬指标先摆出来,方便后面逐条拆解。字均延迟(LAAL)从 2.8 秒降到 2.3 秒;支持 60 种语言识别输入、29 种语言语音输出;三大能力是实时说话人分离与音色克隆、原文译文同帧同出、长上下文消歧。另外它还支持视频与音频输入,视觉信息,比如屏幕上的 PPT、人名条,会辅助消歧。
想上手有两个入口。在线体验走 https://omni.qwen.ai/live-translate,授权麦克风、选源语言与目标语言、直接说话,就能看到实时双语字幕并听到译文朗读。开发者走 API:登录千问 AI 平台拿 API Key,调用 https://www.qianwenai.com/models/qwen3.8-livetranslate-flash-realtime 的实时接口,传入音频流、接收双语文本加译文语音;接入方式官方标为千问 AI 平台与阿里云百炼 WebSocket API。
关于定价、限流、并发、地域可用性,官方未见公开数字,一律以千问 AI 平台与阿里云百炼官方文档为准,本文不编数字。关于接口与落地细节,可参考本批的 API 接入 SOP。
二、"字均延迟 2.8 秒到 2.3 秒"该怎么读
这条数字是最容易被误读的地方,必须先讲清楚口径,否则后面所有讨论都会偏。
LAAL 是 Length-Adjusted Average Latency 的缩写,中文叫字均延迟,是按字为单位摊开的同传延迟指标。官方给出的 2.3 秒是 LAAL 口径,意思是:在它优化过的同传设定下,每一个输出字平均比源语落后 2.3 秒。相比上一版的 2.8 秒,少了 0.5 秒。
0.5 秒在工程上意味着什么?同传和笔译完全不同,人嘴还在动,系统必须在等更多上下文以求准和早出口以求快之间找平衡。等得越久越准,但听众等得越久越难受;出得越早越跟手,但上下文不够就容易翻错。0.5 秒的压缩,靠的是 Interleave 单流架构里的复用机制,已经处理过的音频和译文被缓存进后续推理,每一句不再从空白状态重新理解,于是质量不掉、延迟却降下来。对听众而言,2.8 变 2.3 是少等半秒;对一场一小时的会议,累积起来是体感明显的跟手度提升,会议节奏不会被机器拖慢。
但这里必须划一条线:LAAL 不等于首包延迟,更不等于端到端延迟,这是三个常被混用的概念。首包延迟通常指从说话开始到第一个字或第一包出来的时间,衡量系统反应多快起步;端到端延迟是从源语发声到译文完整可听的总耗时;LAAL 衡量的则是整段译文平均落后源语多少。一个系统可能首包很快、但越往后越拖,LAAL 却很稳;另一个系统可能整体平均落后小,但第一句话要等很久。三者描述的是不同侧面,不能互相替代。
所以看到 2.3 秒这个数字,要清楚它说的是平均每个字落后 2.3 秒,不是开口 2.3 秒就出第一个字,更不是端到端两秒出声。把 LAAL 当成端到端首包延迟来宣传,是本站明确反对的夸大。一句话收束:2.3 秒是同传优化后的字均落后量,是官方口径,不是首包延迟,别外推成 2.3 秒出声。
三、Thinker–Talker 双模块与说话人分离
这一节讲它听得出是谁说的为什么比翻译准更难,以及这项能力在同传里到底值多少钱。
Thinker–Talker 是 Hybrid MoE 下的双模块设计。Thinker 负责想:把视频、音频、原文、译文编排进同一条因果序列,按时序交替排列,端到端完成理解与翻译。Talker 负责说:结合译文与源音频,合成保留原说话人音色的译文语音。两个模块分工明确,一个管内容、一个管声音,但共享同一条交织序列,因此原文与译文的时序天然对齐,不会出现文字对上了、声音对不上的错位。
难点集中在说话人分离,也就是 Diarization。真实会议不是一个人念稿,而是多人插话、抢话、甚至声音重叠。系统在翻译之前先做 Diarization,把每一句话归属到具体说话人,再据此指导 Talker 稳定复刻该说话人的音色。这一步比翻译准难,至少有三个原因。
第一,分离本身难。重叠语音、远场嘈杂、麦克风串音,都会让这句话是谁说的变成开放问题,而分离错了,后面音色克隆就会张冠李戴。第二,音色克隆要稳定。同一位发言人,前一句和后一句的音色不能漂移,否则听众靠声音认人的习惯会被破坏。第三,翻译和复刻要解耦。译文内容来自源语语义,音色却要锁定到具体那个人,两套信息不能串。把这三件事在同一条实时流里同时做对,工程复杂度远高于单纯翻译。
为什么听得出是谁说的价值高?因为同传的最终交付从来不是一段干巴巴的译文,而是谁在说什么的完整还原。人工译员做同传时,听众靠声音区分发言人;如果机器把所有声音揉成一个中性嗓音,会议里谁反对、谁赞成、谁在追问就糊成一团。能分说话人并复刻音色,等于把译员的现场感也一起搬了过来,这对跨国谈判、董事会、多方采访这类场景尤为关键。
此外它支持视频与音频输入,视觉信息辅助消歧。看见屏幕上的幻灯片标题、桌牌上的人名,模型能据此确定专有名词和人名指代,减少只听声音时的单句误判。长上下文消歧也建立在同一思路上:历史对话被纳入上下文建模,跨轮关联前文,避免孤立地判断一个专有名词或一处指代。
关于语音克隆能力的边界与不同工具的横向比较,可看本站相关评测:语音克隆工具横向比较。
四、与 GPT-4o Realtime 的如实对比
下面这张表来自 ai-bot 收录的官方与来源方对比,口径为官方与来源方,非本站独立复测,请按此理解,不要当成第三方实测结论。
| 维度 | Qwen3.8-LiveTranslate | GPT-4o(OpenAI Realtime API) |
|---|---|---|
| 产品定位 | 端到端同声传译大模型 | 通用实时语音对话模型 |
| 架构 | Interleave 音频-文本单流,Hybrid MoE Thinker–Talker 双模块 | 端到端多模态,语音进语音出 |
| 同传延迟 | 字均延迟 2.3 秒(LAAL),专为同传优化 | 近实时对话,无官方同传延迟指标 |
| 说话人分离 | 原生支持,多人发言自动区分 | 有限,依赖 VAD 轮次切分 |
| 音色克隆 | 分说话人复刻原音色朗读译文 | 输出为固定风格语音,不支持音色克隆 |
| 双语同帧输出 | 原文译文同步对齐输出 | 仅输出单语回应 |
| 长上下文消歧 | 跨轮关联历史语境 | 依赖对话记忆,无针对性消歧优化 |
| 语种覆盖 | 60 种识别 / 29 种语音输出 | 约 50+ 种语言对话 |
| 视觉输入 | 支持视频/图像辅助消歧 | 支持图像输入,语音模式下较少使用 |
| 接入方式 | 千问 AI 平台 / 阿里云百炼 WebSocket API | OpenAI Realtime API(WebSocket/WebRTC) |
| 典型场景 | 跨国会议、跨境直播、字幕翻译、视频本地化 | 语音助手、实时口语对话陪练 |
这张表要重点看清楚两件事。第一,GPT-4o 一列在同传延迟上写的是无官方同传延迟指标,这是未公布,不是做不到、延迟更差。把未公布写成延迟更差是失真,本站不允许。一个模型没发布某项指标,只能说明它没在该维度上做过官方对齐,不能反推它更慢。第二,两者定位本就不同:Qwen3.8 为同传而生,GPT-4o 是通用实时语音对话模型,拿对话模型的延迟去压同传模型,口径不对等,结论自然站不住。
说话人分离和音色克隆两项,Qwen3.8 明确原生支持,GPT-4o 列的是有限与不支持,这是来源方对比口径,引用时照此标注即可,不必替对方下断言。双语同帧输出一项,Qwen3.8 同步对齐,GPT-4o 仅单语回应,差异在同传、字幕这类场景里会被放大,但在陪你练口语的对话场景里并不构成短板。语种覆盖一项,Qwen3.8 是 60 种识别加 29 种输出两个口径,GPT-4o 是约 50+ 种对话,两者统计口径也不同,不宜直接相减比大小。
关于两类实时语音模型的横向比较,可参考本批对比评测:实时语音翻译模型对比评测;关于语音进语音出这类基础能力,见资源页:语音到语音资源页。
五、冷思考:别被数字带偏
最后泼几盆冷水,帮读者把口径摆正,也把期待放到合理位置。
其一,识别 60 种与输出 29 种是两个口径,千万别混写成支持 60 种语言。能听懂得和能用语声说出去是两件事,输出语种的工程成本和语音数据门槛远高于识别。写稿、汇报、选型时务必分开表述,否则要么高估、要么误导。
其二,LAAL 不等于端到端。2.3 秒是字均落后量,不是开口到出声的端到端耗时,更不是首包延迟。拿 LAAL 当响应速度宣传,是对读者的误导。前面已经展开过,这里再强调一次,因为它最容易被人当成卖点滥用。
其三,定价、限流、并发、地域可用性官方未见公开,本文不编数字,一切以千问 AI 平台与阿里云百炼官方文档为准。任何很便宜、不限量、全地区可用的说法都缺少出处,遇到这类说法请回官方文档核对。
其四,关于开源:Qwen3.8-LiveTranslate 是 API 服务,无公开代码仓,不得声称它开源。这与一些可以下载权重、自己部署的开源语音模型是两回事,引用时请分清楚,避免把通义家族有开源模型偷换成这个同传模型开源。
其五,同传与人工译员的分寸。模型在跟手度、成本、可规模化上优势明显,但在高 stakes 场景,法律、医疗、外交、带强烈文化隐喻的现场,人工译员的判断、停顿艺术和上下文拿捏仍难以被替代。2.8 到 2.3 秒的进步是真实的,但它替的是标准化同传的量,不是译员的全部价值。把标题里的能替人工译员吗当成一个需要长期观察的问题,比喊一句译员下岗更诚实,也更经得起时间检验。
同传这个赛道,过去十年里被延迟、准确率、成本三座大山压着,每一次架构级的改动都值得记录。Qwen3.8-LiveTranslate 的 Interleave 单流与 Thinker–Talker 双模块,给出了一条把延迟和现场感同时往前推的技术路径。但路径归路径,落地效果如何、规模化成本几何、在真实嘈杂会议里表现怎样,这些都需要时间和真实负载来回答,而不是一张对比表能盖棺定论的。