先看证据

2.8秒降至2.3秒LAAL
See the article text for the exact figure.平均延迟约下降18%
See the article text for the exact figure.支持60种输入语言
See the article text for the exact figure.29种语言支持语音加文本输出
See the article text for the exact figure.其余31种语言仅输出文本
See the article text for the exact figure.API通过WebSocket提供实时服务

把机制串起来

输入先把素材压到可处理的规模

实时同传的核心矛盾是:等更多上下文,翻译通常更准;但等得越久,听众感受到的延迟越大。LAAL衡量译文平均落后源语音多少时间,但它是统计指标,不等于每个听众对“是否自然、是否打断”的主观感受。流式系统还要同时处理语音识别、翻译、合成、说话人识别和增量修正。

机制再把计算集中到关键步骤

Interleave架构把输入音频、源语转写和目标译文作为交错事件处理,使系统可以在说话尚未结束时持续输出,而不是等整句完成再交给下游模块。它本质上仍在延迟与质量之间动态取舍:过早输出会增加错译和后续修正压力,过晚输出则损害同传体验。源文本以独立事件流与译文并行呈现,因此双语字幕可以同步更新,但材料没有说明具体的回滚、撤回或稳定前缀算法。长上下文会在翻译当前名称或术语前读取早期对话,用于解决同音、同形或含义歧义,不过历史本身也会带来上下文长度和错误累积成本。说话人分离与音色克

结果最后落到可验证的工作结果

['适合会议、直播等边说边译场景,需接受增量输出', '多说话人会议先验证分离与音色稳定性', '需要语音输出时,先确认目标语言是否在29种范围内', '对高风险术语仍应保留人工复核,不宜盲信长上下文']

它解决的不是翻译,而是边听边说的矛盾

阿里巴巴Qwen团队发布了Qwen3.8-LiveTranslate,一款面向实时同声传译的模型。它接收持续的现场语音,也可以接收视频帧,在原说话者尚未结束发言时,持续返回译文文本和语音。模型目前以托管API形式提供,通过阿里云Model Studio和QwenCloud上的WebSocket接口qwen3.8-livetranslate-flash-realtime调用。

实时口译的核心冲突很具体。模型等得越久,能看到的上下文越完整,名字、术语和句法关系越不容易误判,但听众必须承受更大的等待。模型越早开口,交互越自然,却越容易在信息尚未完整时做出翻译决定。Qwen此次发布的重点,是试图改变这条处理链,而不仅是把某个单独模块做得更快。

Interleave把流水线改成一条时间流

传统的级联方案通常把语音识别、机器翻译和语音合成拆成几个阶段。一段话先被识别成文字,再交给翻译模块,最后生成目标语音。每个阶段都可能引入排队和等待,前一个阶段的输出也会成为后一个阶段的输入边界。Qwen对Interleave架构的描述,则是把音频、源语言文本和译文放进一条按时间交错的流中,让模型在这些信息之间持续推进,而不是等一个阶段完整结束后再交接给下一个阶段。

发布材料用LAAL,也就是Length-Adaptive Average Lagging,衡量译文平均落后源语音多少。Qwen报告的结果是,平均延迟从2.8秒降到2.3秒,约减少18%。这个数字说明系统把等待压缩了一部分,但不能被理解成每个句子或每个用户场景都会稳定获得0.5秒改善。材料也明确说明,用于解释级联和流式处理的动画是概念示意,不是时延测量,延迟数据来自Qwen本身,而不是独立复测。

系统开始处理会议里的“谁在说”和“前面说过什么”

Qwen3.8-LiveTranslate新增的能力,说明实时口译的难点已经超出“把一句话换成另一种语言”。实时说话人分离会区分多方对话中的不同发言者,稳定的声音克隆则试图让译出的语音保留相应说话人的声音特征。API还提供克隆模式,包括在多说话人会话中每次响应前重新克隆的always模式。对会议、访谈或远程协作来说,这意味着听众不必只依赖内容,也能从声音上判断译文属于谁。

同步双语展示进一步改变了客户端的职责。源语言转写会作为独立事件流出,与翻译流并列显示,而不是只把最终译文交给前端。长上下文消歧则利用先前对话来处理名字和术语,例如早些时候已经介绍过的人名,后续不会因为同音或多义而被重新理解。它们共同表明,实时翻译产品不能只看最终音频是否通顺,还必须处理说话人标记、源文可见性和上下文一致性。

60种理解语言,不等于60种语音体验

语言覆盖是这次发布中最容易被一句数字掩盖的差异。Qwen表示,模型可以理解60种语言,但只有29种能够返回语音加文本,另外31种只能返回文本。也就是说,“支持某种语言”至少包含输入理解、文本翻译和语音输出三个不同层次,不能把语言表中的一个数字直接当作完整的同声传译能力。

输入侧可以是音频,也可以带可选图像,输出则包括翻译文本和语音。模型建立在Qwen-Omni栈、大规模多模态数据、跨语言与跨模态对齐以及视觉增强之上,离线音频和视频翻译能力则由相关的Flash模型支持。对于技术负责人,真正需要核对的是业务所需的语言组合、目标语言是否支持语音,以及当某种语言只能输出文本时,前端是否有合理的降级路径。

落地时,延迟改善要和费用、纠错一起算

这款模型已经有明确的部署入口,但“可调用”不等于“可以直接替代人工口译”。WebSocket接口适合持续接收和消费事件,客户端需要处理源文和译文的并行流、说话人标签、语音播放顺序以及网络抖动。对于多方会议,还要决定是否启用每次响应前重新克隆的模式,因为它可能带来更稳定的说话人声音,也意味着更复杂的会话处理和资源消耗。材料没有给出这些模式在实际负载下的独立性能对比,因此不能据此推断具体的容量或稳定性。

费用也不能只按“每小时音频”粗略估算。材料给出的计费线索是音频输入每秒7个token,音频输出每秒12.5个token,示例估算假设译出音频与源音频持续时间相同,并且不包含文本输出token和图像token。对技术负责人而言,更稳妥的判断是先用真实会议流量测算输入、输出和重试,再观察术语、人名、多人抢话和长时间会话中的错误如何累积。Qwen报告的2.3秒可以作为架构方向的信号,不能直接作为业务SLA。