WhisperX

Whisper 增强版语音识别工具,支持词级时间戳和说话人分离(Diarization)。在 OpenAI Whisper 基础上大幅提升语音转文字精度,是 AI 语音处理流水线的标准组件。22K stars

🎯适用场景:多模态内容理解与生成

#语音识别#Whisper#说话人分离#时间戳

📥 收录于 2026/6/5

📊 仓库数据

Stars23,154
Forks2,346
语言Python
上线2023/1/1
更新2026/7/20

📈 Stars 变化 2 天 +20· 统计区间 7/18 23:22 → 7/20 20:02(2 天)

优点

  • 词级时间戳精准对齐
  • 说话人分离提升多人场景识别
  • 兼容 Whisper 生态
  • Python API 简单易用

⚠️ 限制

  • 需要 GPU 加速才高效
  • 非英语语种精度略降
  • 大规模音频处理需要优化

🔗 相关工具

Whisper.cpp

开源52k+50

github.com/ggml-org/whisper.cpp

OpenAI Whisper C/C++ 移植,48,793+ stars。高性能语音识别引擎,将 OpenAI Whisper 移植到 C/C++,支持 99 种语言的语音转文字,CPU 即可高效运行

🎯多模态内容理解与生成

#语音识别#Whisper#C++#跨平台
语言C++
🍴 Forks5,829
📅 上线2022/9/26
🔄 更新2026/7/20
📥 收录2026/4/20

OpenAI Whisper

开源105k+91

github.com/openai/whisper

OpenAI 开源语音识别模型,99.9K+ stars。支持 99 种语言自动语音识别与翻译,可本地部署保护隐私,广泛用于会议转录、字幕生成等场景

🎯多语言语音转文字、音频转录、本地私有化语音识别

#语音识别#多语言#转录
语言Python
🍴 Forks12,799
📅 上线2022/9/17
🔄 更新2026/7/20
📥 收录2026/4/11

FunASR

开源19k+40

github.com/modelscope/FunASR

阿里 ModelScope 出品的工业级语音识别工具包,170 倍实时、50+ 语言、说话人分离、情绪检测、流式识别,并提供 OpenAI 兼容 API。16K+ stars,是中文语音 AI 的标杆项目

🎯语音识别转写、会议记录自动转录、智能客服语音理解

#ASR#语音识别#多语言#流式识别+1
语言Python
🍴 Forks1,945
🔄 更新2026/7/20
📥 收录2026/6/2

pyVideoTrans

开源18k+23

github.com/jianchang512/pyvideotrans

视频翻译工具,自动翻译视频并嵌入配音和字幕,17k+ stars

🎯将视频从一种语言翻译到另一种语言并嵌入配音和字幕

#视频翻译#配音#字幕#语音合成+1
语言Python
🍴 Forks2,275
🔄 更新2026/7/20
📥 收录2026/5/22

Voice-Pro

开源11k+16

github.com/abus-aikorea/voice-pro

AI 语音处理全栈 WebUI,10K+ stars。集成 TTS、零样本语音克隆、Whisper 语音识别、Demucs 音轨分离等能力

🎯语音合成、语音克隆、播客/有声书制作、多语言翻译配音

#TTS#语音克隆#Whisper#Gradio+1
语言Python
🍴 Forks1,637
📅 上线2024/7/29
🔄 更新2026/7/20
📥 收录2026/6/5

SenseVoice

开源8.9k+14

github.com/FunAudioLLM/SenseVoice

多语言语音理解模型,8.2K+ stars。支持 ASR 语音识别、音频事件检测、跨语言理解和情感检测,是 FunAudioLLM 系列的语音理解模型

🎯多语言语音识别和音频内容理解

#语音识别#音频理解#多语言#情感检测
语言C
🍴 Forks793
🔄 更新2026/7/20
📥 收录2026/5/24