项目

whisperX

m-bain/whisperX · Python · BSD-2-Clause

带词级时间戳的 Whisper 类语音识别

WhisperX 补上了强制对齐与更准的时间戳——按说话剪视频、烧录字幕时很关键。

74.8 / 100 · 评分
★ 25k Star 数
+183 30 天增长
10 分钟 首次运行耗时
无需 API Key

评分

趋势 67
活跃 70
质量 65
社区 61
相关 100

上手成本一览

部署方式Cli, Pip
GPU4 GB
API Key无需
界面语言
文档语言en
安装命令
pip install whisperx

深度解读

WhisperX 是建立在 Whisper 之上的强制对齐语音识别:批量推理用 large-v2 达到约 70 倍实时转录速度,再用 wav2vec2 对齐模型钉出准确的词级时间戳——这正是字幕和视频管线真正需要的东西。

它补上了原始 Whisper 缺的零件:pyannote 声纹分离实现多说话人识别,VAD 预处理降低幻觉并支持批量处理且不损失 WER,还有 faster-whisper 后端压低显存。

Python API 把每个阶段单独暴露——转写、对齐、分离——你可以按任务需要自由拼装管线,对齐方法发表在 arXiv 上。

适用场景

生成字幕
按说话剪辑
播客分章

适合 / 不太适合

适合

视频与播客剪辑

不太适合

硬实时字幕场景

趋势 · 30d

同类替代