文書とのチャットやAIエージェントの実行に使える、ローカル優先・マルチユーザー対応のオールインワンAIアプリ
Osmantic/ODS
PC、Mac、Linuxマシンにチャット、音声、RAG、ワークフロー、画像生成を備えたプライベートなローカルAIサーバーを構築する、セルフホスト型インストーラー兼スタック。
代替できる製品:ChatGPT
- スター
- 7,780
- フォーク
- 1,109
- 未解決の Issue
- 929
- 最終コミット
- 16 時間前
これは何?
ODS(Osmantic Deployment System)は、llama-serverによるローカル推論、Open WebUIのチャット、管理ダッシュボード、音声処理用のWhisperとKokoro、n8nワークフロー、QdrantベースのRAG、SearXNG検索、画像生成用のComfyUIなど、自分のハードウェアでAIモデルを動かすために必要なコンポーネントをインストールして連携します。インストールコマンドを1つ実行するだけで、GPUまたはApple Siliconチップを検出し、搭載メモリに合ったモデルを選んで認証情報を生成し、Dockerで各サービスを起動します。
インストーラーは、フルモデルのダウンロード中に小さなモデルを先行して起動できます。各サービスはmanifestとComposeファイルを含む拡張機能としてパッケージ化されており、ods CLIで有効化・無効化できます。また、LiteLLMを介して、ローカル、クラウド、ハイブリッドのAPIモードを切り替えられます。
Linux、WSL2とDocker Desktopを利用するWindows、およびApple Silicon搭載のmacOSに対応しています。現在はV3のプレリリース版で、インストーラーはmainブランチを追跡します。既知の制限と検証状況は、それぞれ別途ドキュメントに記載されています。
主な機能
- 01GPUまたはApple Siliconを検出し、利用可能なメモリに合ったモデルを選ぶワンコマンドインストーラー
- 02llama-serverによるローカル推論に対応したOpen WebUIのチャットインターフェース
- 03モデル、サービス、GPUの状態、拡張機能を管理するダッシュボード
- 04Whisperによる音声テキスト変換とKokoroによるテキスト読み上げに対応した音声機能
- 05n8nによるワークフロー自動化、Qdrantによるベクトル検索、SearXNGによるWeb検索
- 06ods CLIでサービスの有効化、無効化、管理ができる拡張機能システム
ユースケース
- クラウドAPIのサブスクリプションなしで、自宅にプライベートなチャット・文書アシスタントを構築する
- 自分のファイルを対象にRAGを利用できるローカルAIワークステーションやホームラボを構築する
- 自分のマシン内で完結する音声・ワークフロー自動化を構築する
- プロンプトをホスト型サービスに送信せず、ComfyUIで画像をローカル生成する
クイックスタート
- 1
Docker をインストールし、起動していることを確認してください(Linux または macOS)
- 2
README に記載されている公式インストールスクリプトを実行してください(Linux または macOS)
- 3
Windows では、通常の PowerShell ウィンドウで README に記載されている PowerShell インストーラーブロックを実行してください
使う前に知っておきたいこと
- これは V3 のプレリリース版で、署名されていない main ブランチをインストールするため、頻繁に変更される可能性があります。
- Windows のセットアップには WSL2、Docker Desktop、およそ 40 GB の空きディスク容量が必要です。
- Intel Arc に対応した Linux 環境は実験的で、ハードウェアに依存します。
- Cloud モードは、OpenAI、Anthropic、Together などの外部 API サービスに依存します。
収録されている特集
トピック
よくある質問
- ODS とは?
- PC、Mac、Linuxマシンにチャット、音声、RAG、ワークフロー、画像生成を備えたプライベートなローカルAIサーバーを構築する、セルフホスト型インストーラー兼スタック。 ODS(Osmantic Deployment System)は、llama-serverによるローカル推論、Open WebUIのチャット、管理ダッシュボード、音声処理用のWhisperとKokoro、n8nワークフロー、QdrantベースのRAG、SearXNG検索、画像生成用のComfyUIなど、自分のハードウェアでAIモデルを動かすために必要なコンポーネントをインストールして連携します。インストールコマンドを1つ実行するだけで、GPUまたはApple Siliconチップを検出し、搭載メモリに合ったモデルを選んで認証情報を生成し、Dockerで各サービスを起動します。
- ODS は無料で使えますか?ライセンスは?
- ODS は Apache-2.0 ライセンスのオープンソースです。商用製品で使う前にライセンス条件を確認してください。
- ODS は今もメンテナンスされていますか?
- 活発にメンテナンス中。ODS の最終コミットは 2026年11月6日 です。
- ODS は何に使えますか?
- クラウドAPIのサブスクリプションなしで、自宅にプライベートなチャット・文書アシスタントを構築する 自分のファイルを対象にRAGを利用できるローカルAIワークステーションやホームラボを構築する 自分のマシン内で完結する音声・ワークフロー自動化を構築する プロンプトをホスト型サービスに送信せず、ComfyUIで画像をローカル生成する
- ODS のインストール方法は?
- Docker をインストールし、起動していることを確認してください(Linux または macOS) README に記載されている公式インストールスクリプトを実行してください(Linux または macOS) Windows では、通常の PowerShell ウィンドウで README に記載されている PowerShell インストーラーブロックを実行してください
- ODS はどこで入手できますか?
- ソースコードとインストール手順は GitHub にあります:https://github.com/Osmantic/ODS
概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。
関連プロジェクト
Stable Diffusionによる画像生成、GGUFチャット、Whisper音声認識、Kokoro音声合成をまとめた、オフラインで使えるデスクトップ型のローカルAIスタジオ。
ブラウザーWebUI、ターミナルクライアント、チャットアプリ連携、各種ツール、メモリ、MCPに対応した、Python製のセルフホスト型パーソナルAIエージェントフレームワーク。
画面を必要なときだけ読み取り、会議音声を聞き取り、APIキーやデータをローカルに保管する、プライバシー重視のデスクトップAIコパイロットです。
AIアシスタントのチームで長期的なワークフローを自動化する実験的なGoプラットフォーム。Vue製Web UIを搭載。