开会时,等对方说完一整段再翻译,谈话节奏很容易被打断。腾讯混元的 Hy-SimulMT 瞄准的正是这个问题:它能在讲话仍在继续时边听边译,支持中英双向语音翻译,同时输出文字和语音,还可通过语音克隆保留说话人的音色特征。
模型采用 30B-A3B 规格,即总参数约 300 亿,但每次计算只激活约 30 亿,试图用较低的单次计算量承载更大的模型容量。腾讯给出的 RealSI 长音频评测中,其 StreamLAAL——衡量流式翻译延迟的指标——约为 3 秒,在列出的系统里最低;衡量翻译质量的 GEMBA 得分则超过对比的开源模型和五个商业 API 中的四个。这些结果来自项目方自述,尚缺独立复核。
对本地开发者更实际的一点是,项目同步提供 GGUF 版本——一种便于在个人电脑和不同硬件后端分发量化模型的格式,并开放 SimulInfer 推理服务与 SimulTrain 训练工具。不过,语音输出和语音克隆仍需另行配置 TTS(文字转语音)服务。