将云基础设施与 SaaS 元数据同步到数据仓库、支持 SQL 查询的数据管道与 CLI 工具。
- Star
- 22,242
- Fork
- 5,414
- 未关闭 Issue
- 2,612
- 最近提交
- 22小时前
这是什么?
Airbyte 是一个开源数据集成平台,用于把数据从源端搬运到目标端。它提供 600 多个连接器,覆盖 API、数据库、数据仓库、数据湖和 AI 应用,既可以自托管部署,也可以使用 Airbyte Cloud。
主要用途是 ELT 和 ETL:把 SaaS 工具和数据库中的数据集中到 Snowflake、BigQuery、Redshift 等数据仓库,或写入数据湖、Postgres、MySQL、MSSQL 等目标。连接器可以通过无代码的 Connector Builder 创建,也可以用低代码 CDK 开发。同步任务可以由 Airflow、Dagster、Kestra 或 Airbyte API 调度。
项目还提供独立的开源 Agent SDK,让 AI 智能体以类型安全的方式把业务数据作为 LLM 工具调用,兼容 pydantic-ai、LangChain、OpenAI Agents 和 FastMCP。
核心功能
- 01提供 600 多个连接器,覆盖 API、数据库、数据仓库和数据湖
- 02支持无代码 Connector Builder 和低代码 CDK 开发自定义连接器
- 03支持数据库源的变更数据捕获(CDC)
- 04可与 Airflow、Dagster、Kestra 集成调度同步任务
- 05支持自托管部署或使用 Airbyte Cloud
适用场景
- 把 SaaS 和数据库数据集中到 Snowflake 或 BigQuery 数据仓库
- 从 API 和文件构建数据湖的数据摄取管道
- 为内部系统或小众数据源开发自定义连接器
- 通过开源 Agent SDK 把业务数据提供给 AI 智能体
快速上手
- 1
部署 Airbyte 开源版(参见部署指南)
- 2
或为 AI 智能体安装开源 Agent SDK
uv pip install airbyte-agent-sdk
使用前须知
- README 同时提到 MIT 和 ELv2 许可证,使用前需仔细核对授权条款。
- 元数据中的许可证未明确标注,仓库没有单一清晰的许可证。
- 自托管 Airbyte 开源版需要自行部署和维护平台,README 仅提供部署指南链接,没有一行命令即可搭建。
标签
常见问题
- airbyte 是什么?
- 开源数据搬运平台,用于 ELT 管道,把 API、数据库和文件中的数据同步到数据仓库、数据湖和 AI 应用。 Airbyte 是一个开源数据集成平台,用于把数据从源端搬运到目标端。它提供 600 多个连接器,覆盖 API、数据库、数据仓库、数据湖和 AI 应用,既可以自托管部署,也可以使用 Airbyte Cloud。
- airbyte 可以免费使用吗?用的什么许可证?
- airbyte 以 Other 许可证开源。用于商业产品前,请先确认许可证条款。
- airbyte 还在维护吗?
- 活跃维护中。airbyte 最近一次提交是在 2026年10月19日。
- airbyte 适合用来做什么?
- 把 SaaS 和数据库数据集中到 Snowflake 或 BigQuery 数据仓库 从 API 和文件构建数据湖的数据摄取管道 为内部系统或小众数据源开发自定义连接器 通过开源 Agent SDK 把业务数据提供给 AI 智能体
- airbyte 怎么安装和运行?
- 部署 Airbyte 开源版(参见部署指南) 或为 AI 智能体安装开源 Agent SDK: uv pip install airbyte-agent-sdk
- 在哪里获取 airbyte?
- 源代码和安装说明在 GitHub 上:https://github.com/airbytehq/airbyte
概要由 AI 根据项目 README 生成;GitHub 数据每日更新。
相关项目
可直接替代 Jupyter 的数据笔记本,内置 AI 助手,支持 Python、R 和 SQL。
基于 dbt 的开源数据可观测性命令行工具,读取 Elementary dbt 包的结果生成报告并发送告警。
基于 Python 与 Rust 内核的增量数据管道框架,让向量索引和知识图谱随源数据变化持续同步,服务于 AI 智能体与 RAG 应用。
开源 Python 数据平台,统一接入金融等数据源,并通过 Python、Excel、AI Agent 与 REST API 对外提供。
开源产品分析平台,集成事件分析、会话回放、功能开关、A/B 实验、错误追踪、问卷和数据仓库。