音声・マルチモーダルAIエージェントを構築するためのオープンソースPythonフレームワーク。音声処理、LLM、通信サービスを差し替えて利用できます。
kizuna-ai-lab/sokuji
クラウドプロバイダーにも端末内の完全オフラインモデルにも対応した、会議向けリアルタイム双方向音声翻訳アプリ
代替できる製品:Google Meet Live Translation
Microsoft Teams Interpreter
- スター
- 1,408
- フォーク
- 205
- 未解決の Issue
- 36
- 最終コミット
- 一昨日
これは何?
Sokujiは、2つの言語間で会話をリアルタイムに翻訳します。話されている言語を判別し、双方向にもう一方の言語へ翻訳するため、異なる言語を話す2人が同じ会話を追えます。マイク音声とシステム音声を同時に取り込み、翻訳結果を音声で再生したり、ライブ字幕で表示したりできます。
Windows、macOS、Linux向けのデスクトップアプリとして提供され、Zoom、Teams、Discordなど、マイク入力に対応するあらゆるアプリで利用できます。ChromeとEdge向けのブラウザー拡張機能を使えば、Google MeetやZoomのWeb版などのオンライン会議サービス内で直接利用できます。OpenAI、Gemini、Soniox、Palabra.aiなどのクラウドプロバイダー経由で翻訳できるほか、APIキーなしでWASMとWebGPUを使い、音声認識、翻訳、音声合成を端末内で実行するLocal Inferenceモードにも対応しています。
主な機能
- 01話されている言語を自動判定し、双方向に翻訳
- 02マイク音声とシステム音声を1つのセッションで同時に取り込み
- 03ライブ字幕と翻訳音声の出力に対応し、他のアプリで使える仮想マイクも搭載
- 04クラウドAPIや完全オフラインのLocal Inferenceなど、8種類のプロバイダーを選択可能
- 05Local InferenceではAPIキー不要でASR、翻訳、TTSを端末内で実行
- 06Windows、macOS、Linux向けのデスクトップアプリと、ChromeおよびEdge向け拡張機能を提供
ユースケース
- 参加者が異なる言語を話すビデオ会議を行う
- 外国語のウェビナーやゲームのボイスチャットをライブ字幕で視聴する
- インターネットやGPUがないマシンで、プライバシーに配慮が必要な会話をオフライン翻訳する
クイックスタート
- 1
リポジトリをクローンする
git clone https://github.com/kizuna-ai-lab/sokuji.git - 2
フォルダーに移動して依存関係をインストールする
cd sokuji && npm install - 3
デスクトップアプリの開発版を起動する
npm run electron:dev
使う前に知っておきたいこと
- AGPL-3.0 ライセンスのもとで提供されており、派生作品も同じ条件でオープンソースにする必要があります。
- クラウドプロバイダーを利用するには各自の API キーが必要です。完全オフラインモードではデバイス上のモデルを使用します。
- ブラウザー拡張機能は Chrome と Edge のみ対応しています。Brave は近日対応予定です。
トピック
よくある質問
- sokuji とは?
- クラウドプロバイダーにも端末内の完全オフラインモデルにも対応した、会議向けリアルタイム双方向音声翻訳アプリ Sokujiは、2つの言語間で会話をリアルタイムに翻訳します。話されている言語を判別し、双方向にもう一方の言語へ翻訳するため、異なる言語を話す2人が同じ会話を追えます。マイク音声とシステム音声を同時に取り込み、翻訳結果を音声で再生したり、ライブ字幕で表示したりできます。
- sokuji は無料で使えますか?ライセンスは?
- sokuji は AGPL-3.0 ライセンスのオープンソースです。商用製品で使う前にライセンス条件を確認してください。
- sokuji は今もメンテナンスされていますか?
- 活発にメンテナンス中。sokuji の最終コミットは 2026年10月18日 です。
- sokuji は何に使えますか?
- 参加者が異なる言語を話すビデオ会議を行う 外国語のウェビナーやゲームのボイスチャットをライブ字幕で視聴する インターネットやGPUがないマシンで、プライバシーに配慮が必要な会話をオフライン翻訳する
- sokuji のインストール方法は?
- リポジトリをクローンする: git clone https://github.com/kizuna-ai-lab/sokuji.git フォルダーに移動して依存関係をインストールする: cd sokuji && npm install デスクトップアプリの開発版を起動する: npm run electron:dev
- sokuji はどこで入手できますか?
- ソースコードとインストール手順は GitHub にあります:https://github.com/kizuna-ai-lab/sokuji
概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。
関連プロジェクト
Whisperでオフライン動作する、macOS・Windows向けのオープンソースなローカルファーストAI音声入力アプリ。
646言語に対応した、音声クローンや音声デザイン、動画吹き替え、文字起こしなどを行うローカル優先のオープンソース音声スタジオ。
音声クローン、音声生成、あらゆるアプリへの音声入力、AIエージェントの音声化に対応するローカルファーストのオープンソースAI音声スタジオ。
リアルタイム音声エージェントやアプリ向けの、音声認識・意図認識・音声合成に対応したオープンソースのオンデバイスツールキット。
複数のモデルとオープンソースのエージェントハーネスを選べる、ナレッジワークやソフトウェア開発向けのエージェントワークスペース。ローカルでもホスト環境でも実行できます。