GPT-SoVITS

开源多模态 & 视觉57k↑+19

1 分钟数据训练 TTS,56,826+ stars。强大的少样本语音克隆和文本转语音工具,仅需 1 分钟参考音频即可训练出高质量 TTS 模型,支持多语言和中日英三语合成

🎯适用场景:个性化语音合成、虚拟主播配音、多语种内容制作

#TTS#语音克隆#少样本学习#多语言

📊 仓库数据

Stars56,996
Forks6,218
语言Python
上线2024/1/14
更新2026/4/27

📈 上次抓取以来 ↑+19

优点

  • 仅需 1 分钟数据即可训练
  • 语音质量高自然度好
  • 支持中日英多语言
  • 社区活跃持续优化

⚠️ 限制

  • 训练需要 GPU
  • 部署配置较复杂
  • 存在深度伪造滥用风险

🔗 相关工具

Real-Time Voice Cloning

开源60k2

github.com/corentinj/real-time-voice-cloning

5 秒语音克隆工具,59,640+ stars。只需 5 秒音频样本即可克隆任意人声,支持实时语音合成,是语音合成和 TTS 领域的里程碑项目

🎯 语音合成、角色配音、语音辅助工具、创意内容制作

#语音克隆#TTS#音频合成#实时
语言Python
🍴 Forks9,406
📅 上线2019/5/26
🔄 更新2026/4/27

Voicebox

开源24k↑+141

github.com/jamiepine/voicebox

Voicebox 是开源的语音合成工作室,提供高质量的文本转语音 (TTS) 能力。支持多语言、多音色、情感化语音生成,22,208 stars(周增 5,198 星)。与商业 TTS 服务不同,Voicebox 完全开源可自部署,提供 Web UI 和 API 两种使用方式。支持声音克隆(少量样本即可)、实时流式输出、SSML 标记语言控制韵律和语调,是播客制作、有声书生成、游戏配音和 AI 语音助手的理想选择

🎯 播客/有声书自动化、游戏 NPC 配音、AI 语音助手、视频内容配音、无障碍朗读

#开源#TTS#语音合成#声音克隆+1
语言TypeScript
🍴 Forks2,802
📅 上线2026/1/25
🔄 更新2026/4/27

VoxCPM2

开源16k↑+58

github.com/OpenBMB/VoxCPM

VoxCPM2 是由清华大学和 OpenBMB 联合开源的无 Tokenizer 语音合成模型。不同于传统 TTS 模型先将文本转为 token 再生成语音的流程,VoxCPM2 直接从字符映射到音频波形,消除了 Tokenizer 环节带来的信息损失。2B 参数规模,支持 30 种语言、48kHz 录音棚级音质、零样本语音克隆(仅需 3 秒参考音频即可复刻音色)和创意声音设计。GitHub 15K+ stars,是 2026 年最值得关注的开源 TTS 项目之一。与 Voicebox 互补——VoxCPM2 偏重学术创新和无 Tokenizer 架构探索,Voicebox 偏重工程实用和用户体验

🎯 开源 TTS 研究、中文语音合成、有声书/播客自动化、语音克隆实验、AI 助手语音输出、多语言内容本地化配音

#语音合成#开源#无 Tokenizer#语音克隆+3
语言Python
🍴 Forks1,895
📅 上线2025/9/16
🔄 更新2026/4/27

OpenAI Whisper

开源99k↑+49

github.com/openai/whisper

开源语音识别模型,支持多语言转录和翻译

🎯 语音转文字、字幕生成、多语言翻译

#语音识别#多语言#转录
语言Python
🍴 Forks12,109
📅 上线2022/9/16
🔄 更新2026/4/27

PaddleOCR

开源77k↑+73

github.com/PaddlePaddle/PaddleOCR

百度开源的多语言 OCR 工具,75,995+ stars。支持 80+ 语言识别,提供超轻量级中文 OCR 模型(仅几 MB),可部署于服务器、移动端和嵌入式设备,是工业级 OCR 方案的首选

🎯 文档数字化、车牌识别、票据处理、多语言文字提取

#OCR#多语言#轻量级#工业级
语言Python
🍴 Forks10,327
📅 上线2020/5/8
🔄 更新2026/4/27

Tesseract OCR

开源74k↑+15

github.com/tesseract-ocr/tesseract

开源 OCR 引擎,73,620+ stars。由 HP 开发、Google 维护的顶级文字识别引擎,支持 100+ 语言,可识别图片、PDF、扫描件中的文字。结合 LSTM 神经网络实现高精度 OCR,是 AI 文档处理的基础设施。

🎯 文档数字化、发票/收据识别、多语言文字提取、AI 文档处理 Pipeline

#OCR#文字识别#文档处理#多语言
语言C++
🍴 Forks10,610
📅 上线2014/8/12
🔄 更新2026/4/27