Универсальное AI-приложение для общения с документами и запуска AI-агентов: локальная работа, поддержка нескольких пользователей и множество LLM-провайдеров.
Osmantic/ODS
Самостоятельно устанавливаемый AI-стек для запуска приватного локального AI-сервера на ПК, Mac или Linux: чат, голос, RAG, автоматизация и генерация изображений.
Open source альтернатива:ChatGPT
- Звёзды
- 7,789
- Форки
- 1,110
- Открытые issues
- 929
- Последний коммит
- 17 часов назад
Что это?
ODS (Osmantic Deployment System) устанавливает и связывает компоненты для запуска AI-моделей на собственном оборудовании: локальный инференс через llama-server, чат в Open WebUI, панель управления, Whisper и Kokoro для работы с речью, сценарии n8n, RAG на базе Qdrant, поиск через SearXNG и генерацию изображений в ComfyUI. Одна команда установки определяет GPU или чип Apple Silicon, выбирает модель, которой хватит доступной памяти, генерирует учётные данные и запускает сервисы в Docker.
Установщик может запустить небольшую модель, пока полная загружается в фоновом режиме. Каждый сервис поставляется как расширение с manifest-файлом и Compose-файлом, поэтому включать и отключать сервисы можно через CLI ods. CLI также переключает режимы работы API: локальный, облачный и гибридный — через LiteLLM.
Проект поддерживает Linux, Windows через WSL2 и Docker Desktop, а также macOS на Apple Silicon. Сейчас это предварительный релиз V3: установщики отслеживают основную ветку, а известные ограничения и статус проверки описаны отдельно.
Ключевые возможности
- 01Установка одной командой: определяет GPU или Apple Silicon и выбирает модель с учётом доступной памяти
- 02Интерфейс чата Open WebUI с локальным инференсом через llama-server
- 03Панель управления моделями, сервисами, статусом GPU и расширениями
- 04Голосовые функции: преобразование речи в текст с Whisper и текста в речь с Kokoro
- 05Автоматизация сценариев в n8n, векторный поиск через Qdrant и веб-поиск через SearXNG
- 06Система расширений с CLI ods для включения, отключения и управления сервисами
Сценарии использования
- Запуск приватного чата и помощника по документам дома без подписок на облачные API
- Настройка локальной AI-рабочей станции или homelab с RAG по собственным файлам
- Создание голосовых сценариев и автоматизаций, работающих на вашем устройстве
- Локальная генерация изображений в ComfyUI без отправки запросов в размещённый в облаке сервис
Быстрый старт
- 1
Установите Docker и убедитесь, что он запущен (Linux или macOS).
- 2
Запустите официальный скрипт установки из README (Linux или macOS).
- 3
В Windows запустите блок установщика PowerShell из README в обычном окне PowerShell.
Что важно знать
- Это предварительная версия V3, которая устанавливает неподписанную ветку main, поэтому она может часто меняться.
- Для настройки Windows требуются WSL2, Docker Desktop и около 40 ГБ свободного места на диске.
- Поддержка Intel Arc в Linux экспериментальная и зависит от конкретного оборудования.
- Режим Cloud зависит от внешних API-сервисов, таких как OpenAI, Anthropic или Together.
В подборках
Темы
Частые вопросы
- Что такое ODS?
- Самостоятельно устанавливаемый AI-стек для запуска приватного локального AI-сервера на ПК, Mac или Linux: чат, голос, RAG, автоматизация и генерация изображений. ODS (Osmantic Deployment System) устанавливает и связывает компоненты для запуска AI-моделей на собственном оборудовании: локальный инференс через llama-server, чат в Open WebUI, панель управления, Whisper и Kokoro для работы с речью, сценарии n8n, RAG на базе Qdrant, поиск через SearXNG и генерацию изображений в ComfyUI. Одна команда установки определяет GPU или чип Apple Silicon, выбирает модель, которой хватит доступной памяти, генерирует учётные данные и запускает сервисы в Docker.
- ODS можно использовать бесплатно? Какая у него лицензия?
- ODS распространяется с открытым исходным кодом под лицензией Apache-2.0. Перед использованием в коммерческих продуктах проверьте условия лицензии.
- ODS всё ещё поддерживается?
- Активно поддерживается. Последний коммит в ODS — 7 нояб. 2026 г..
- Для чего можно использовать ODS?
- Запуск приватного чата и помощника по документам дома без подписок на облачные API Настройка локальной AI-рабочей станции или homelab с RAG по собственным файлам Создание голосовых сценариев и автоматизаций, работающих на вашем устройстве Локальная генерация изображений в ComfyUI без отправки запросов в размещённый в облаке сервис
- Как установить ODS?
- Установите Docker и убедитесь, что он запущен (Linux или macOS). Запустите официальный скрипт установки из README (Linux или macOS). В Windows запустите блок установщика PowerShell из README в обычном окне PowerShell.
- Где скачать ODS?
- Исходный код и инструкции по установке — на GitHub: https://github.com/Osmantic/ODS
Описание создано ИИ на основе README проекта. Статистика GitHub обновляется ежедневно.
Похожие проекты
Офлайн-студия локального ИИ в формате настольного приложения: генерация изображений Stable Diffusion, чат с GGUF, распознавание речи Whisper и синтез речи Kokoro.
Лёгкий фреймворк на Python для собственного AI-агента с WebUI в браузере, терминальным клиентом, каналами для чатов, инструментами, памятью и поддержкой MCP.
Ориентированный на конфиденциальность настольный AI-ассистент: по запросу анализирует экран, слушает встречи и хранит ключи и данные локально.
Экспериментальная платформа на Go для автоматизации длительных процессов с командами AI-ассистентов и веб-интерфейсом на Vue.
Локальное AI-пространство для чатов и агентов в браузере: запускает модели WebLLM на устройстве через WebGPU, без бэкенда и учётной записи.