英文原标题:A Closer Look at Phonon TTS. Launching High-Quality On-Device Speech That Tops the Benchmarks.

本文为英文原文的机器翻译摘要,原文见:Hugging Face Blog ↗

  • Phonon 是 Gradium 推出的端侧文本转语音模型,无需服务器和网络,用户输入的文本保留在本地设备上。
  • 模型有两个尺寸(约 65 MB 和 75 MB),支持英语、法语、德语、西班牙语和葡萄牙语,内置超过 100 种声音,并能处理电话号码、日期和代码等常见难点。
  • Phonon 31m 采用 Apache 2.0 许可,可免费商用;Phonon 40m 覆盖五种语言,采用 CC BY-NC 非商业许可,商用定价基于用户数量而非语音生成量。
  • 在 Hugging Face Open TTS Leaderboard 上,Phonon 在德语和西班牙语的可懂度排名第一,在所有评估语言中均进入前三,并在 CPU 流式基准的首个音频时间上领先。
  • 发布两周内下载量超过 20 万次,并提供了 Apple Watch、iPhone、浏览器和机器人等多种离线演示,同时推出了专用推理框架 ptts 和 Transformers 集成。

关键数据

  • Phonon 31m 参数量为 30,788,354,音频分词器参数量为 10,305,313。
  • 模型大小约为 65 MB 和 75 MB。
  • 支持超过 100 种内置声音。
  • 发布两周内下载量超过 200,000 次。
  • Hugging Face Hub 上有超过 9,000 个 TTS 模型。
  • ptts 支持超过 10 种后端,包括 CPU、GPU 和 NPU。

为什么值得看:Phonon 展示了在极小模型上实现高质量、多语言且完全离线的语音合成,并在公开基准上媲美大得多的模型,为端侧语音应用提供了新选择。

站内导航