开源数据搬运平台,用于 ELT 管道,把 API、数据库和文件中的数据同步到数据仓库、数据湖和 AI 应用。
2.2万5415PythonOther更新于 11小时前
一门免费的 9 周在线课程,通过从零搭建端到端数据管道来讲授数据工程基础。
Data Engineering Zoomcamp 是一门免费的数据工程入门课程,可选择自学或跟随固定批次学习。学员从零搭建一条端到端的数据管道,课程涵盖容器化与基础设施即代码、工作流编排、数据摄取、数据仓库、分析工程、基于 Spark 的批处理以及基于 Kafka 的流处理。
课程分为七个模块和一个工作坊,使用的工具包括 Docker、Terraform、Kestra、dlt、BigQuery、DuckDB、dbt、Bruin、Spark 和 Kafka。每个模块配有预录制视频和作业,课程以一个综合项目收尾。
固定批次学员的作业会计分并参与排行榜和同伴互评,完成最终项目后可获得证书。自学模式使用相同的学习材料,但作业不计分,也不颁发证书。
打开 GitHub 上的课程资料,从第 1 模块开始
加入 Slack 社区,提问并分享学习进度
概要由 AI 根据项目 README 生成;GitHub 数据每日更新。
开源数据搬运平台,用于 ELT 管道,把 API、数据库和文件中的数据同步到数据仓库、数据湖和 AI 应用。
自托管的云端开发环境与 AI 编程代理平台,使用 Terraform 定义工作区。
一款免费开源的游戏服务器管理面板,每台服务器运行在独立的 Docker 容器中。
开源的代码化商业智能工具,用 SQL 和 Markdown 编写交互式数据报表与仪表盘。
基于 dbt 的开源数据可观测性命令行工具,读取 Elementary dbt 包的结果生成报告并发送告警。
一款可自托管的免费笔记应用,支持富文本与 Markdown 笔记、任务列表和日记,可替代 Notion 等工具。