V3版本与V2版本不兼容,使用V2需切换到release/2.4.x分支;预训练模型需加入知识星球获取,README未提供直接下载链接;README未给出具体pip安装命令,需参考docs/install.md

PPASR
yeyupiaolingApache-2.0更新放缓基于 PaddlePaddle 的端到端中文语音识别项目,提供 DeepSpeech2、Conformer、Squeezeformer 等主流模型,既有入门案例也有企业级实战方案。
基于PaddlePaddle实现端到端中文语音识别,从入门到实战,超简单的入门案例,超实用的企业项目。支持当前最流行的DeepSpeech2、Conformer、Squeezeformer模型
暂无版本869star128fork同步于 2026-11-07 07:30 UTC
conda create -n ppasr python=3.11
conda activate ppasr
pip install paddlepaddle-gpu==2.6.1 硬件要求按 README 说明
README未说明具体显存要求;可部署在服务器和Nvidia Jetson设备,未来计划支持Android等移动设备
基于PaddlePaddle的端到端中文语音识别框架,支持流式与非流式识别
基于 PaddlePaddle 的端到端中文语音识别项目,提供 DeepSpeech2、Conformer、Squeezeformer 等主流模型,既有入门案例也有企业级实战方案。
核心能力
- 支持DeepSpeech2、Conformer、Squeezeformer等模型
- 每个模型可通过streaming参数切换流式与非流式
- 支持ctc_greedy_search、ctc_prefix_beam_search、attention_rescoring等多种解码器
- 支持fbank、mfcc预处理及噪声、混响、语速等多种数据增强
- 支持短音频、长音频、流式及说话人分离推理
容易踩的坑
内容由模型根据 README 生成,可能不完整或不准确,以官方文档为准。看原文 README
暂无 release 数据(可能没有发版,或尚未同步)。
用户点评
登录用户的真实使用记录,可按版本和硬件筛选共 0 条
还没有人点评。第一个说出真实体验的人最有价值。
PPASR流式与非流式语音识别项目
PPASR是一款基于PaddlePaddle实现的自动语音识别框架,PPASR中文名称PaddlePaddle中文语音识别(PaddlePaddle Automatic Speech Recognition),当前为V3版本,与V2版本不兼容,如果想使用V2版本,请在这个分支V2。PPASR致力于简单,实用的语音识别项目。可部署在服务器,Nvidia Jetson设备,未来还计划支持Android等移动设备。别忘了star
欢迎大家扫码入知识星球或者QQ群讨论,知识星球里面提供项目的模型文件和博主其他相关项目的模型文件,也包括其他一些资源。
本项目使用的环境:
- Anaconda 3
- Python 3.11
- PaddlePaddle 2.6.1
- Windows 11 or Ubuntu 22.04
在线试用
网页版: 在线试用地址
项目特点
- 支持多个语音识别模型,包含
deepspeech2、conformer、squeezeformer、efficient_conformer等,每个模型都支持流式识别和非流式识别,在配置文件中streaming参数设置。 - 支持多种解码器,包含
ctc_greedy_search、ctc_prefix_beam_search、attention_rescoring、ctc_beam_search等。 - 支持多种预处理方法,包含
fbank、mfcc等。 - 支持多种数据增强方法,包含噪声增强、混响增强、语速增强、音量增强、重采样增强、位移增强、SpecAugmentor、SpecSubAugmentor等。
- 支持多种推理方法,包含短音频推理、长音频推理、流式推理、说话人分离推理等。
- 更多特点等待你发现。
与V2版本的区别
- 项目结构的优化,大幅度降低的使用难度。
- 更换预处理的库,改用kaldi_native_fbank,在提高数据预处理的速度,同时也支持多平台。
- 修改token的方法,使用sentencepiece制作token,这个框架极大的降低了多种语言的处理难度,同时还使中英文混合训练成为可能。
更新记录
- 2025.03: 正式发布最终级的V3版本。
视频讲解
模型下载
- WenetSpeech (10000小时,普通话) 的预训练模型列表,错误率类型为字错率(CER):
| 使用模型 | 是否为流式 | 预处理方式 | 解码方式 | test_net | test_meeting | aishell_test | 下载地址 |
|---|---|---|---|---|---|---|---|
| Conformer | True | fbank | ctc_greedy_search | 0.14758 | 0.19562 | 0.06925 | 加入知识星球获取 |
| Conformer | True | fbank | ctc_prefix_beam_search | 0.14689 | 0.19323 | 0.06930 | 加入知识星球获取 |
| Conformer | True | fbank | attention_rescoring | 0.13786 | 0.18922 | 0.06028 | 加入知识星球获取 |
| Conformer | True | fbank | ctc_beam_search | 0.20660 | 0.29835 | 0.05336 | 加入知识星球获取 |
| DeepSpeech2 | True | fbank | ctc_greedy_search | 加入知识星球获取 | |||
| DeepSpeech2 | True | fbank | ctc_prefix_beam_search | 加入知识星球获取 | |||
| DeepSpeech2 | True | fbank | ctc_beam_search | 加入知识星球获取 |
- AIShell (179小时,普通话) 的预训练模型列表,错误率类型为字错率(CER):
| 使用模型 | 是否为流式 | 预处理方式 | 解码方式 | 自带的测试集 | 下载地址 |
|---|---|---|---|---|---|
| Conformer | True | fbank | ctc_greedy_search | 0.06110 | 加入知识星球获取 |
| Conformer | True | fbank | ctc_prefix_beam_search | 0.06114 | 加入知识星球获取 |
| Conformer | True | fbank | attention_rescoring | 0.05412 | 加入知识星球获取 |
| Conformer | True | fbank | ctc_beam_search | 0.04468 | 加入知识星球获取 |
| DeepSpeech2 | True | fbank | ctc_greedy_search | 0.14134 | 加入知识星球获取 |
| DeepSpeech2 | True | fbank | ctc_prefix_beam_search | 0.14132 | 加入知识星球获取 |
| DeepSpeech2 | True | fbank | ctc_beam_search | 0.10598 | 加入知识星球获取 |
- Librispeech (960小时,英语) 的预训练模型列表,错误率类型为词错率(WER):
| 使用模型 | 是否为流式 | 预处理方式 | 解码方式 | 自带的测试集 | 下载地址 |
|---|---|---|---|---|---|
| Conformer | True | fbank | ctc_greedy_search | 0.07562 | 加入知识星球获取 |
| Conformer | True | fbank | ctc_prefix_beam_search | 0.07518 | 加入知识星球获取 |
| Conformer | True | fbank | attention_rescoring | 0.06669 | 加入知识星球获取 |
| Conformer | True | fbank | ctc_beam_search | / | 加入知识星球获取 |
| DeepSpeech2 | True | fbank | ctc_greedy_search | 0.15479 | 加入知识星球获取 |
| DeepSpeech2 | True | fbank | ctc_prefix_beam_search | 0.15247 | 加入知识星球获取 |
| DeepSpeech2 | True | fbank | ctc_beam_search | / | 加入知识星球获取 |
- 其他数据集的预训练模型列表,错误率类型,如果是中文就是字错率(CER),英文则是词错率(WER),中英混合为混合错误率(MER):
| 使用模型 | 数据集 | 语言 | 解码方式 | 测试数据 | 下载地址 |
|---|---|---|---|---|---|
| Conformer | 粤语数据集 | 粤语 | ctc_greedy_search | 0.05834 | 加入知识星球获取 |
| Conformer | 粤语数据集 | 粤语 | ctc_prefix_beam_search | 0.05815 | 加入知识星球获取 |
| Conformer | 粤语数据集 | 粤语 | attention_rescoring | 0.04734 | 加入知识星球获取 |
| Conformer | 粤语数据集 | 粤语 | ctc_beam_search | 0.06191 | 加入知识星球获取 |
| Conformer | 中英混合数据集 | 中英文 | ctc_greedy_search | 0.09462 | 加入知识星球获取 |
| Conformer | 中英混合数据集 | 中英文 | ctc_prefix_beam_search | 0.09416 | 加入知识星球获取 |
| Conformer | 中英混合数据集 | 中英文 | attention_rescoring | 0.08283 | 加入知识星球获取 |
| Conformer | 中英混合数据集 | 中英文 | ctc_beam_search | / | 加入知识星球获取 |
| Conformer | 更大数据集(16000+小时) | 中英文 | ctc_greedy_search | 加入知识星球获取 | |
| Conformer | 更大数据集(16000+小时) | 中英文 | ctc_prefix_beam_search | 加入知识星球获取 | |
| Conformer | 更大数据集(16000+小时) | 中英文 | attention_rescoring | 加入知识星球获取 | |
| Conformer | 更大数据集(16000+小时) | 中英文 | ctc_beam_search | 加入知识星球获取 | |
| Conformer | CommonVoice-Uyghur + THUYG20 | 维吾尔语 | ctc_greedy_search | 0.04510 | 加入知识星球获取 |
| Conformer | CommonVoice-Uyghur + THUYG20 | 维吾尔语 | ctc_prefix_beam_search | 0.04404 | 加入知识星球获取 |
| Conformer | CommonVoice-Uyghur + THUYG20 | 维吾尔语 | attention_rescoring | 0.02823 | 加入知识星球获取 |
说明:
- 这里字错率或者词错率是使用
eval.py。 - 分别给出了使用三个解码器的错误率,其中
ctc_prefix_beam_search、attention_rescoring的解码搜索大小为10。 - 训练时使用了噪声增强和混响增强,以及其他增强方法,具体请看配置参数
configs/augmentation.yml。 - 这里只提供了流式模型,但全部模型都支持流式和非流式的,在配置文件中
streaming参数设置。 - 使用
CommonVoice-Uyghur的测试集作为本项目测试集,其余的和THUYG20全部作为训练集。
有问题欢迎提 issue 交流
文档教程
相关项目
- 基于PaddlePaddle实现的声纹识别:VoiceprintRecognition-PaddlePaddle
- 基于PaddlePaddle静态图实现的语音识别:PaddlePaddle-DeepSpeech
- 基于Pytorch实现的语音识别:MASR
特别感谢
- 感谢 JetBrains开源社区 提供开发工具。