dagster-io/dagster

Что это?

Ключевые возможности

• 01Описывайте данные как Python-функции с помощью декларативной модели.
• 02Просматривайте зависимости и происхождение данных в веб-интерфейсе.
• 03Планируйте запуски данных и поддерживайте их в актуальном состоянии.
• 04Встроенные средства наблюдаемости и диагностики, а также каталогизация метаданных.
• 05Мультитенантный движок оркестрации для production-развёртываний.
• 06Растущая библиотека интеграций с популярными инструментами для работы с данными.

Сценарии использования

• Построение ETL- и ELT-пайплайнов для формирования таблиц в хранилище данных.
• Оркестрация обучения моделей машинного обучения и связанных с ними пайплайнов.
• Поддержка актуальности отчётов и датасетов.
• Локальное тестирование пайплайнов данных и их проверка в CI перед развёртыванием в production.

Быстрый старт

1. 1

   Установите Dagster, веб-сервер и CLI с помощью uv

   uv add dagster dagster-webserver dagster-dg-cli
2. 2

   Следуйте практическому руководству в документации, чтобы создать свой первый пайплайн

Темы

Частые вопросы

Что такое dagster?

Платформа оркестрации на Python для описания, запуска и мониторинга данных: таблиц, датасетов, ML-моделей и отчётов. В Dagster можно объявить нужные вам данные как Python-функции, а платформа запустит их в подходящее время и будет поддерживать в актуальном состоянии. Данные связываются в граф, поэтому в веб-интерфейсе видны зависимости, происхождение данных и история запусков.

dagster можно использовать бесплатно? Какая у него лицензия?

dagster распространяется с открытым исходным кодом под лицензией Apache-2.0. Перед использованием в коммерческих продуктах проверьте условия лицензии.

dagster всё ещё поддерживается?

Активно поддерживается. Последний коммит в dagster — 21 окт. 2026 г..

Для чего можно использовать dagster?

Построение ETL- и ELT-пайплайнов для формирования таблиц в хранилище данных. Оркестрация обучения моделей машинного обучения и связанных с ними пайплайнов. Поддержка актуальности отчётов и датасетов. Локальное тестирование пайплайнов данных и их проверка в CI перед развёртыванием в production.

Как установить dagster?

Установите Dagster, веб-сервер и CLI с помощью uv: uv add dagster dagster-webserver dagster-dg-cli Следуйте практическому руководству в документации, чтобы создать свой первый пайплайн

Где скачать dagster?

Исходный код и инструкции по установке — на GitHub: https://github.com/dagster-io/dagster