Microsoft의 오픈소스 음성 AI 모델 제품군으로, 장문 음성 인식(ASR), 다중 화자 텍스트 음성 변환(TTS), 실시간 스트리밍 TTS 모델을 제공합니다.
PaddlePaddle/PaddleSpeech
PaddlePaddle 기반 오픈소스 음성 툴킷으로, 음성 인식, 음성 합성, 화자 검증, 키워드 스폿팅 및 음성 번역을 지원합니다.
- 스타
- 12,704
- 포크
- 1,952
- 열린 이슈
- 277
- 마지막 커밋
- 3개월 전
어떤 프로젝트인가요?
PaddleSpeech는 PaddlePaddle 딥러닝 프레임워크 기반의 음성 및 오디오 툴킷입니다. 자동 음성 인식, 음성 합성, 오디오 분류, 화자 검증, 화자 분리, 키워드 스폿팅, 문장 부호 복원, 영어-중국어 음성 번역을 위한 즉시 사용 가능한 명령줄 도구와 Python API를 제공합니다.
DeepSpeech2, Conformer 및 Transformer 기반 ASR, TTS용 FastSpeech2, VITS, HiFiGAN, 화자 관련 작업용 ECAPA-TDNN 등 다양한 아키텍처의 사전 학습 모델과 학습 레시피를 제공합니다. 텍스트 정규화와 자소-음소 변환을 지원하는 중국어 텍스트 프론트엔드가 포함되어 있으며, 오프라인 및 스트리밍 ASR·TTS 서버를 모두 제공합니다. TTS 모델은 ONNX로 내보낼 수 있습니다.
데이터 준비와 학습부터 추론 및 배포까지 전체 파이프라인을 지원하며, C++ 런타임 예제와 Android 및 ARM Linux 데모도 포함합니다.
핵심 기능
- 01스트리밍 및 비스트리밍 모델을 이용한 음성 인식과 문장 부호 복원.
- 02중국어 텍스트 프론트엔드와 다양한 음향 모델 및 보코더를 지원하는 음성 합성.
- 03화자 검증, 화자 분리 및 오디오 분류.
- 04키워드 스폿팅 및 영어-중국어 음성 번역.
- 05배포를 위한 명령줄 도구, Python API, HTTP 및 스트리밍 서버.
활용 사례
- 중국어 애플리케이션에 음성-텍스트 변환이나 자막 생성 기능 추가.
- 가상 진행자, 오디오북 또는 음성 비서용 음성 생성.
- 백엔드 서비스에서 화자 검증 또는 음성 지문 인식 실행.
- AISHELL 및 LibriSpeech와 같은 데이터셋을 사용한 음성 모델 연구 또는 파인튜닝.
사용 전 알아둘 점
- PaddlePaddle 프레임워크를 기반으로 하므로 사용하려면 해당 프레임워크를 설치해야 합니다.
- 제공된 README 발췌본에는 설치 명령어가 포함되어 있지 않습니다.
포함된 컬렉션
토픽
자주 묻는 질문
- PaddleSpeech은(는) 무엇인가요?
- PaddlePaddle 기반 오픈소스 음성 툴킷으로, 음성 인식, 음성 합성, 화자 검증, 키워드 스폿팅 및 음성 번역을 지원합니다. PaddleSpeech는 PaddlePaddle 딥러닝 프레임워크 기반의 음성 및 오디오 툴킷입니다. 자동 음성 인식, 음성 합성, 오디오 분류, 화자 검증, 화자 분리, 키워드 스폿팅, 문장 부호 복원, 영어-중국어 음성 번역을 위한 즉시 사용 가능한 명령줄 도구와 Python API를 제공합니다.
- PaddleSpeech은(는) 무료로 사용할 수 있나요? 라이선스는 무엇인가요?
- PaddleSpeech은(는) Apache-2.0 라이선스의 오픈소스입니다. 상업용 제품에 사용하기 전에 라이선스 조건을 확인하세요.
- PaddleSpeech은(는) 아직 유지보수되고 있나요?
- 6개월 이내 업데이트. PaddleSpeech의 마지막 커밋은 2026년 8월 12일입니다.
- PaddleSpeech은(는) 어디에 사용할 수 있나요?
- 중국어 애플리케이션에 음성-텍스트 변환이나 자막 생성 기능 추가. 가상 진행자, 오디오북 또는 음성 비서용 음성 생성. 백엔드 서비스에서 화자 검증 또는 음성 지문 인식 실행. AISHELL 및 LibriSpeech와 같은 데이터셋을 사용한 음성 모델 연구 또는 파인튜닝.
- PaddleSpeech은(는) 어디서 받을 수 있나요?
- 소스 코드와 설치 방법은 GitHub에 있습니다: https://github.com/PaddlePaddle/PaddleSpeech
요약은 프로젝트 README를 바탕으로 AI가 작성했습니다. GitHub 통계는 매일 갱신됩니다.
관련 프로젝트
NVIDIA의 오픈소스 툴킷으로, 음성 인식(ASR), 음성 합성(TTS), 음성 LLM 모델을 구축하고 미세 조정해 배포할 수 있습니다.
Alibaba Cloud Bailian 음성 모델을 호출해 음성 인식, 음성 합성, 음성 대화를 구현하는 샘플 코드입니다.
음성 복제, 다중 화자 대화, 인라인 큐를 지원하는 Fish Audio Drama 3 TTS용 ComfyUI 노드와 네이티브 Qwen3-ASR 전사 기능을 제공합니다.
CLI, Python API, 학습 레시피와 배포 런타임을 갖춘 프로덕션 지향 PyTorch 엔드투엔드 음성 인식 툴킷입니다.
오프라인 및 스트리밍 ASR을 위한 오픈소스 음성 인식 툴킷으로, VAD, 문장 부호 복원, 화자 라벨링과 OpenAI 호환 서빙을 지원합니다.