LLM 스타일 모델을 기반으로 음성 복제, 자연어 감정 제어, 다중 화자 생성을 지원하는 오픈 소스 TTS 시스템입니다.
fishaudio/Bert-VITS2
다국어 BERT를 추가해 합성 음성의 운율과 발음을 개선하는 VITS2 기반 텍스트 음성 변환 프로젝트입니다.
- 스타
- 8,801
- 포크
- 1,307
- 열린 이슈
- 2
- 마지막 커밋
- 4일 전
어떤 프로젝트인가요?
Bert-VITS2는 VITS2 아키텍처를 기반으로 만든 텍스트 음성 변환 프로젝트입니다. 다국어 BERT 모델에서 추출한 텍스트 특징을 VITS2 백본에 입력해 합성 음성의 운율과 발음을 더 자연스럽게 만드는 것을 목표로 합니다.
저장소에는 전처리 및 학습 워크플로가 제공되며, 시작을 위한 빠른 안내 역할을 하는 WebUI 진입점(webui_preprocess.py)도 포함되어 있습니다. 프로젝트의 핵심 접근 방식은 MassTTS 프로젝트를 바탕으로 하며, vits, vits2_pytorch, so-vits-svc 등 관련 작업도 참고 자료로 소개합니다.
관리자들은 이 프로젝트가 더 이상 활발히 유지보수되지 않는다고 안내하며, 최신 autoregressive TTS 옵션을 찾는 사용자에게 후속 프로젝트인 Fish-Speech를 권장합니다.
핵심 기능
- 01VITS2와 다국어 BERT 텍스트 특징을 결합해 음성을 합성합니다.
- 02WebUI 기반의 전처리 및 학습 워크플로를 제공합니다.
- 03보코더 구성 요소를 포함한 VITS2 백본을 기반으로 합니다.
- 04소스 코드는 AGPL-3.0 라이선스를 따릅니다.
활용 사례
- 직접 녹음한 음성 데이터로 맞춤형 음성 모델을 학습합니다.
- BERT 텍스트 임베딩을 VITS 스타일 TTS 모델에 통합하는 방법을 연구합니다.
- 중국어 및 다국어 음성 합성 파이프라인을 실험합니다.
사용 전 알아둘 점
- 이 프로젝트는 강한 카피레프트 라이선스인 AGPL-3.0에 따라 배포됩니다.
- README에는 단기적으로 프로젝트를 유지 관리하지 않을 예정이며 대신 Fish-Speech를 권장한다고 적혀 있습니다.
- README는 정치적 목적의 사용과 중국 법률을 위반하는 활동에 대한 사용을 금지합니다.
포함된 컬렉션
토픽
자주 묻는 질문
- Bert-VITS2은(는) 무엇인가요?
- 다국어 BERT를 추가해 합성 음성의 운율과 발음을 개선하는 VITS2 기반 텍스트 음성 변환 프로젝트입니다. Bert-VITS2는 VITS2 아키텍처를 기반으로 만든 텍스트 음성 변환 프로젝트입니다. 다국어 BERT 모델에서 추출한 텍스트 특징을 VITS2 백본에 입력해 합성 음성의 운율과 발음을 더 자연스럽게 만드는 것을 목표로 합니다.
- Bert-VITS2은(는) 무료로 사용할 수 있나요? 라이선스는 무엇인가요?
- Bert-VITS2은(는) AGPL-3.0 라이선스의 오픈소스입니다. 상업용 제품에 사용하기 전에 라이선스 조건을 확인하세요.
- Bert-VITS2은(는) 아직 유지보수되고 있나요?
- 활발히 유지보수 중. Bert-VITS2의 마지막 커밋은 2026년 11월 2일입니다.
- Bert-VITS2은(는) 어디에 사용할 수 있나요?
- 직접 녹음한 음성 데이터로 맞춤형 음성 모델을 학습합니다. BERT 텍스트 임베딩을 VITS 스타일 TTS 모델에 통합하는 방법을 연구합니다. 중국어 및 다국어 음성 합성 파이프라인을 실험합니다.
- Bert-VITS2은(는) 어디서 받을 수 있나요?
- 소스 코드와 설치 방법은 GitHub에 있습니다: https://github.com/fishaudio/Bert-VITS2
요약은 프로젝트 README를 바탕으로 AI가 작성했습니다. GitHub 통계는 매일 갱신됩니다.
관련 프로젝트
Alibaba Cloud Bailian 음성 모델을 호출해 음성 인식, 음성 합성, 음성 대화를 구현하는 샘플 코드입니다.
Flow matching과 Diffusion Transformer를 사용하는 오픈소스 TTS 시스템으로, 짧은 참조 오디오만으로 zero-shot 음성 클로닝을 지원합니다.
영어와 중국어를 지원하고 2000개 이상의 음성과 프롬프트 기반 감정 표현 합성을 제공하는 오픈 소스 TTS 엔진입니다.
GPU에서 실시간의 150배 이상으로 실행되는 경량 ZipVoice 기반 음성 복제 및 48kHz 음성 생성 TTS 모델입니다.
사전 학습 모델, 학습 도구, 데이터셋 큐레이션 유틸리티를 제공하는 오픈소스 Python 텍스트 음성 변환 및 음성 변환 툴킷입니다.