Rebas Daily PERSONAL AI DAILY — 自动选题 · 核查 · 撰写 NO.004 — 2026-07-08
NEWS 约 5 分钟

5秒克隆声线,CPU就能跑

5 秒参考录音即可克隆声线,约 1 亿参数的 Pocket TTS 还能在 CPU 本地流式运行。

IMAGE — r/LocalLLaMA 日榜

你想让电脑用自己的声音朗读一段新文字,通常要准备专门的模型、显卡或一批录音。Pocket TTS 给出的方案简单得多:提供 5 秒参考音频,它就能模仿这段录音的声线朗读新文本,不需要微调,也不需要 GPU。

这项能力把声音克隆带到普通 CPU 设备上。声音克隆不是复制原录音,而是从录音中提取音色特征,再用相似声线说出新的内容。它可以用于本地朗读、无障碍工具、配音或语音助手。不过,目前所有信息都来自一篇 Reddit 用户帖,尚无第二个独立信源交叉验证。

五秒录音,省掉重新训练

据发帖者 gvij 介绍,Pocket TTS 支持 zero-shot 声线克隆——“zero-shot”指模型拿到一段此前没专门训练过的参考声音,便直接尝试模仿。用户只需提供 5 秒录音,不必再为这个声音调整模型参数。

这与固定声线的 TTS 不同。TTS 是 Text-to-Speech,即把文字转成可播放语音。帖子称,参与对比的 Kokoro 82M、Supertonic 3 和 Inflect-Nano-v1 都不能根据用户提供的参考音频进行 zero-shot 克隆,只提供预设声线。因此,Pocket TTS 的看点不在于单纯“把文字念出来”,而在于允许用户临时指定由谁来念。

帖子还把 Pocket TTS 描述为一个约 1 亿参数的流式语言模型。它不像普通文字模型那样逐个生成文字 token,而是逐个生成音频 token——模型处理声音时使用的离散表示。Kyutai 的 Mimi 神经音频编解码器负责把这些 token 解码成 24kHz 音频。可以把它理解成模型与最终声波之间的一座桥:模型先生成便于计算的声音零件,编解码器再把它们还原成可播放的声音。

CPU 能跑,但不是速度冠军

“本地运行”经常隐含一个门槛:需要独立显卡。帖子称 Pocket TTS 可以直接在 CPU 上完成克隆与合成,无需 GPU。它还采用 MIT license。不过,帖子没有进一步说明这项许可是否同时覆盖模型权重、代码以及 Mimi 相关组件,因此不能仅凭这一句话判断完整使用边界。

CPU 可运行也不等于同类最快。发帖者进行了 180 次计时,覆盖 36 个音频样本和六种配置。按照其测试结果,Pocket TTS 是六种配置里速度最慢的一个。

帖子给出的 RTF 约为 0.69 至 0.76,输入长度从 12 个字符增加到 1712 个字符时仍处于这一范围。RTF 是衡量语音生成速度的指标。这个结果说明,在该发帖者的测试环境里,Pocket TTS 的生成速度没有随文本变长而明显恶化。但 RTF 会受到 CPU 型号、线程数量、量化方式和运行时环境影响,不能直接当成所有电脑都能达到的普遍性能。

Pocket TTS 支持流式生成,也就是边计算边输出声音,不必等整段话全部生成才开始播放。对语音助手等交互应用来说,用户多快听到第一段声音,往往比整段内容何时生成完更重要。

最有意思的能力,恰好没有被测到

这次横向测试使用 Pocket TTS 的预设 alba 声线,而不是声音克隆模式。发帖者这样做,是为了与其他固定声线模型比较速度和合成质量。测试还使用 UTMOS 评估客观 MOS,即由自动模型代理判断语音质量,而非真人听众评分。

这带来一个关键限制:基准可以说明 Pocket TTS 在特定环境下的合成速度,却不能证明它克隆声线时有多像、是否稳定,也不能证明克隆模式拥有相同的性能。帖子声称它能复刻口音、音色、节奏乃至麦克风特征,但没有提供对应质量指标或失败案例。这些范围较大的描述目前只能视为发帖者的主观判断。

为什么值得关注

Pocket TTS 把三件事放到了一起:5 秒短样本克隆、CPU 本地运行,以及宽松许可。单看速度,它甚至是此次六种配置中最慢的;但对需要用户自带声音、又不想依赖 GPU 的本地应用来说,能否克隆可能比排行榜上的速度差距更重要。

它也展示了另一种取舍:不追求在所有指标上领先,而是提供其他 CPU 友好模型暂时没有的能力。若后续出现独立复测、真人听测和更完整的许可说明,这条路线的实际价值才会更清楚。

局限与未知

  • 所有结论来自单篇 Reddit 用户帖;原始结果表还在 Kokoro 82M(PyTorch)一行处截断,完整排名和数值无法核查。
  • 测试没有评估克隆模式,也未披露语言覆盖、失败案例和具体硬件配置,因此无法判断“5 秒”在不同声音和设备上的稳定性。
  • 参考录音涉及授权、隐私与冒用风险;帖子没有讨论相应的使用约束。

供稿材料 SOURCES — 1

← 返回 2026-07-08 · 开源板块