Фреймворк инкрементальных конвейеров данных на Python с ядром на Rust, который синхронизирует векторные индексы и графы знаний с меняющимися источниками для AI-агентов и RAG-приложений.
11,7 тыс.921RustApache-2.0Обновлён 16 часов назад
- Звёзды
- 22,242
- Форки
- 5,414
- Открытые issues
- 2,612
- Последний коммит
- 10 часов назад
Что это?
Airbyte — это open-source платформа для интеграции данных, которая переносит их из источников в целевые системы. В её каталоге более 600 коннекторов для API, баз данных, хранилищ данных, озёр данных и AI-приложений. Платформу можно развернуть самостоятельно или использовать через Airbyte Cloud.
Основной сценарий использования — ELT и ETL: сбор данных из SaaS-сервисов и баз данных в хранилищах, таких как Snowflake, BigQuery и Redshift, или в озёрах данных и целевых системах на базе Postgres/MySQL/MSSQL. Коннекторы можно создавать без кода с помощью Connector Builder или с помощью low-code CDK. Синхронизацию можно оркестрировать через Airflow, Dagster, Kestra или Airbyte API.
В проект также входит отдельный open-source Agent SDK, который даёт AI-агентам типизированный доступ к бизнес-данным в качестве LLM-инструментов. Он работает с pydantic-ai, LangChain, OpenAI Agents и FastMCP.
Ключевые возможности
- 01Каталог из более чем 600 коннекторов для API, баз данных, хранилищ данных и озёр данных
- 02Connector Builder для создания коннекторов без кода и low-code CDK для разработки собственных коннекторов
- 03Поддержка change data capture для источников на базе баз данных
- 04Интеграции для оркестрации с Airflow, Dagster и Kestra
- 05Развёртывание на собственной инфраструктуре или использование Airbyte Cloud
Сценарии использования
- Сбор данных из SaaS-сервисов и баз данных в хранилище Snowflake или BigQuery
- Создание пайплайна загрузки данных из API и файлов в озеро данных
- Добавление собственного коннектора для внутреннего или редко используемого источника данных
- Передача бизнес-данных AI-агентам через open-source Agent SDK
Быстрый старт
- 1
Разверните Airbyte Open Source (см. руководство по развертыванию).
- 2
Или установите Agent SDK с открытым исходным кодом для ИИ-агентов.
uv pip install airbyte-agent-sdk
Что важно знать
- В README упоминаются лицензии MIT и ELv2, поэтому условия лицензирования необходимо тщательно проверить.
- В репозитории нет одной четко определенной лицензии, а в метаданных указано, что лицензия не задана.
- Для самостоятельного размещения Airbyte Open Source необходимо развернуть платформу и поддерживать ее самостоятельно. В README приведена ссылка на руководство по развертыванию, а не инструкция по установке одной командой.
Темы
Частые вопросы
- Что такое airbyte?
- Open-source платформа для перемещения данных в ELT-пайплайнах: из API, баз данных и файлов в хранилища, озёра данных и AI-приложения. Airbyte — это open-source платформа для интеграции данных, которая переносит их из источников в целевые системы. В её каталоге более 600 коннекторов для API, баз данных, хранилищ данных, озёр данных и AI-приложений. Платформу можно развернуть самостоятельно или использовать через Airbyte Cloud.
- airbyte можно использовать бесплатно? Какая у него лицензия?
- airbyte распространяется с открытым исходным кодом под лицензией Other. Перед использованием в коммерческих продуктах проверьте условия лицензии.
- airbyte всё ещё поддерживается?
- Активно поддерживается. Последний коммит в airbyte — 19 окт. 2026 г..
- Для чего можно использовать airbyte?
- Сбор данных из SaaS-сервисов и баз данных в хранилище Snowflake или BigQuery Создание пайплайна загрузки данных из API и файлов в озеро данных Добавление собственного коннектора для внутреннего или редко используемого источника данных Передача бизнес-данных AI-агентам через open-source Agent SDK
- Как установить airbyte?
- Разверните Airbyte Open Source (см. руководство по развертыванию). Или установите Agent SDK с открытым исходным кодом для ИИ-агентов.: uv pip install airbyte-agent-sdk
- Где скачать airbyte?
- Исходный код и инструкции по установке — на GitHub: https://github.com/airbytehq/airbyte
Описание создано ИИ на основе README проекта. Статистика GitHub обновляется ежедневно.
Похожие проекты
Открытая платформа данных на Python, объединяющая финансовые и другие источники и предоставляющая к ним доступ из Python, Excel, AI-агентов и через REST API.
74,4 тыс.7,7 тыс.PythonOtherОбновлён 22 часа назад
Платформа продуктовой аналитики с открытым исходным кодом: аналитика событий, записи сессий, feature flags, эксперименты, отслеживание ошибок, опросы и хранилище данных.
40,3 тыс.3,5 тыс.PythonOtherОбновлён 8 часов назад
Локальная рабочая среда для данных: объединяет базы компании, SaaS-инструменты и файлы в единую онтологию, доступную для запросов на вашем компьютере.
1,6 тыс.243TypeScriptApache-2.0Обновлён 7 дней назад
Лёгкий Python-пакет для поиска новостей Google News с выдачей результатов в JSON и возможностью извлекать полный текст статей.
1 тыс.153PythonMITОбновлён 11 дней назад
Коллекция из 177 проверенных навыков для AI-агентов, которые помогают им работать с научными библиотеками, базами данных и исследовательскими процессами.
52,8 тыс.4,7 тыс.PythonMITОбновлён 9 часов назад