646言語に対応した、音声クローンや音声デザイン、動画吹き替え、文字起こしなどを行うローカル優先のオープンソース音声スタジオ。
abus-aikorea/voice-pro
音声合成、ボイスクローン、Whisper文字起こし、YouTubeダウンロード、音声分離、吹き替え用翻訳を備えたWindows向けGradioアプリ。
代替できる製品:ElevenLabs
- スター
- 13,226
- フォーク
- 1,909
- 未解決の Issue
- 62
- 最終コミット
- 3 か月前
これは何?
Voice-Proは、吹き替えや字幕制作に使えるGradioベースのWebアプリです。YouTube動画のダウンロードと音声抽出、Demucsによる音声分離、Whisper、Faster-Whisper、Whisper-Timestampedによる音声認識、Deep-Translatorを使った100以上の言語への翻訳を統合しており、Azure Translatorも任意で利用できます。
音声出力には、Edge-TTSとkokoroによるテキスト読み上げに加え、F5-TTS、E2-TTS、CosyVoiceによるゼロショットのボイスクローンを利用できます。作業機能はWebUIのタブ「Dubbing Studio」「Whisper Caption」「Translate」「Speech Generation」に分かれています。
インストーラーはNVIDIA GPU搭載のWindows向けに設計されており、ライセンスはGPL-3.0です。開発者によると、現在は開発が一時停止しており、MacとLinuxでの動作は確認されていません。
主な機能
- 01Whisper、Faster-Whisper、Whisper-Timestampedで音声を文字起こし
- 02Edge-TTSとkokoroによる音声合成、およびF5-TTS、E2-TTS、CosyVoiceによるゼロショットのボイスクローン
- 03yt-dlpでYouTube動画をダウンロードし、音声を抽出
- 04Demucsで音楽からボーカルを分離
- 05SRTやASSなどの形式の字幕を翻訳
ユースケース
- クローンした音声やプリセット音声を使って、YouTube動画を別の言語に吹き替える
- ポッドキャストや動画の字幕を単語単位のタイミング付きで生成する
- カラオケやリミックス用に楽曲からボーカルを分離する
- 多言語で配信するために字幕ファイルを翻訳する
クイックスタート
- 1
GitHubからリポジトリをダウンロードするか、クローンします
- 2
Windowsでstart.batを実行して、Webアプリをインストールして起動します
start.bat - 3
問題が発生した場合は、installer_filesフォルダーを削除してからstart.batを再実行します
start.bat
使う前に知っておきたいこと
- NVIDIA GPUを搭載したWindows向けに開発・テストされています。macOSとLinuxでは動作確認されていません。
- メンテナーによる開発と更新は現在停止しています。
- このプロジェクトはGPL-3.0ライセンス(コピーレフト)で提供されており、派生物もオープンソースとして公開する必要があります。
- Azure TTSやAzure Translatorなど、一部のオプション機能には独自のAPIキーが必要です。
トピック
よくある質問
- voice-pro とは?
- 音声合成、ボイスクローン、Whisper文字起こし、YouTubeダウンロード、音声分離、吹き替え用翻訳を備えたWindows向けGradioアプリ。 Voice-Proは、吹き替えや字幕制作に使えるGradioベースのWebアプリです。YouTube動画のダウンロードと音声抽出、Demucsによる音声分離、Whisper、Faster-Whisper、Whisper-Timestampedによる音声認識、Deep-Translatorを使った100以上の言語への翻訳を統合しており、Azure Translatorも任意で利用できます。
- voice-pro は無料で使えますか?ライセンスは?
- voice-pro は GPL-3.0 ライセンスのオープンソースです。商用製品で使う前にライセンス条件を確認してください。
- voice-pro は今もメンテナンスされていますか?
- 半年以内に更新あり。voice-pro の最終コミットは 2026年7月13日 です。
- voice-pro は何に使えますか?
- クローンした音声やプリセット音声を使って、YouTube動画を別の言語に吹き替える ポッドキャストや動画の字幕を単語単位のタイミング付きで生成する カラオケやリミックス用に楽曲からボーカルを分離する 多言語で配信するために字幕ファイルを翻訳する
- voice-pro のインストール方法は?
- GitHubからリポジトリをダウンロードするか、クローンします Windowsでstart.batを実行して、Webアプリをインストールして起動します: start.bat 問題が発生した場合は、installer_filesフォルダーを削除してからstart.batを再実行します: start.bat
- voice-pro はどこで入手できますか?
- ソースコードとインストール手順は GitHub にあります:https://github.com/abus-aikorea/voice-pro
概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。
関連プロジェクト
Whisperを基盤とするオープンソースの音声認識ツール。強制アライメントによる単語単位のタイムスタンプと、任意の話者ダイアライゼーションに対応します。
OpenAIのWhisperを使い、音声や動画をオフラインで文字起こし・翻訳できるデスクトップアプリ。
音声認識、字幕翻訳、AI吹き替え、音声と映像の合成に対応した、動画を別の言語に翻訳するオープンソースツール。
Ollamaを使い、YouTubeライブ配信に英語・中国語の字幕をリアルタイム表示するChrome拡張機能とローカルPythonサービス。
音声認識、字幕の分割・修正・翻訳、動画への字幕合成に対応した、LLM搭載のデスクトップ/CLIツール。