Open-source платформа для перемещения данных в ELT-пайплайнах: из API, баз данных и файлов в хранилища, озёра данных и AI-приложения.
DataTalksClub/data-engineering-zoomcamp
Бесплатный онлайн-курс на 9 недель, который знакомит с data engineering на практике: участники с нуля создают сквозной конвейер данных.
- Звёзды
- 46,308
- Форки
- 8,989
- Открытые issues
- 6
- Последний коммит
- 6 дней назад
Что это?
Data Engineering Zoomcamp — бесплатный курс по основам data engineering, который можно проходить самостоятельно или в составе потока. Участники с нуля создают сквозной конвейер данных и изучают контейнеризацию, оркестрацию рабочих процессов, загрузку данных, хранилища данных, аналитику данных, пакетную обработку в Spark и потоковую обработку в Kafka.
Программа включает семь модулей и практический воркшоп, в которых используются Docker, Terraform, Kestra, dlt, BigQuery, DuckDB, dbt, Bruin, Spark и Kafka. В каждом модуле есть записанные лекции и домашние задания, а завершается курс итоговым проектом.
В потоке с занятиями по расписанию домашние задания оцениваются, есть таблица лидеров и взаимное ревью, а за выполнение итогового проекта выдают сертификат. В самостоятельном формате используются те же материалы, но без оценок и сертификации.
Ключевые возможности
- 01Семь модулей и воркшоп, охватывающие весь жизненный цикл data engineering
- 02Практический конвейер данных на Docker, Terraform, Kestra, dbt и BigQuery
- 03Пакетная обработка с Apache Spark и потоковая обработка с Kafka
- 04Итоговый проект с взаимным ревью
- 05Бесплатный доступ ко всем видео, материалам и домашним заданиям
Сценарии использования
- Для разработчиков и аналитиков, которые хотят перейти в data engineering
- Для тех, кто хочет добавить в портфолио проект с инструментами современного стека данных
- Для специалистов по data science, которым нужно разобраться в конвейерах данных, хранилищах и оркестрации
- Для инженеров-самоучек, которым нужна структурированная программа с бесплатными материалами
Быстрый старт
- 1
Откройте материалы курса на GitHub и начните с модуля 1
- 2
Присоединитесь к сообществу в Slack, чтобы задавать вопросы и делиться успехами
Что важно знать
- В метаданных проекта лицензия не указана.
- Сертификаты и задания с оценкой доступны только в потоке с преподавателем, но не в режиме самостоятельного обучения.
- Поток с преподавателем начинается в январе 2027 года и проходит по фиксированному графику.
Темы
Частые вопросы
- Что такое data-engineering-zoomcamp?
- Бесплатный онлайн-курс на 9 недель, который знакомит с data engineering на практике: участники с нуля создают сквозной конвейер данных. Data Engineering Zoomcamp — бесплатный курс по основам data engineering, который можно проходить самостоятельно или в составе потока. Участники с нуля создают сквозной конвейер данных и изучают контейнеризацию, оркестрацию рабочих процессов, загрузку данных, хранилища данных, аналитику данных, пакетную обработку в Spark и потоковую обработку в Kafka.
- data-engineering-zoomcamp можно использовать бесплатно? Какая у него лицензия?
- У data-engineering-zoomcamp не указана лицензия. Код открыт, но без лицензии нет явного разрешения на его использование — уточните у автора, прежде чем на него полагаться.
- data-engineering-zoomcamp всё ещё поддерживается?
- Активно поддерживается. Последний коммит в data-engineering-zoomcamp — 15 окт. 2026 г..
- Для чего можно использовать data-engineering-zoomcamp?
- Для разработчиков и аналитиков, которые хотят перейти в data engineering Для тех, кто хочет добавить в портфолио проект с инструментами современного стека данных Для специалистов по data science, которым нужно разобраться в конвейерах данных, хранилищах и оркестрации Для инженеров-самоучек, которым нужна структурированная программа с бесплатными материалами
- Как установить data-engineering-zoomcamp?
- Откройте материалы курса на GitHub и начните с модуля 1 Присоединитесь к сообществу в Slack, чтобы задавать вопросы и делиться успехами
- Где скачать data-engineering-zoomcamp?
- Исходный код и инструкции по установке — на GitHub: https://github.com/DataTalksClub/data-engineering-zoomcamp
Описание создано ИИ на основе README проекта. Статистика GitHub обновляется ежедневно.
Похожие проекты
Платформа для облачных сред разработки и AI-агентов для написания кода с самостоятельным размещением; рабочие пространства настраиваются в Terraform.
Бесплатная веб-панель с открытым исходным кодом для управления игровыми серверами, каждый из которых работает в отдельном Docker-контейнере.
BI-инструмент с открытым исходным кодом, который создает интерактивные отчеты и дашборды на основе SQL и Markdown.
Open-source CLI для наблюдения за данными в dbt: читает результаты пакета Elementary dbt, формирует отчёты и отправляет оповещения в Slack и Teams.
Бесплатное приложение для заметок с самостоятельным размещением: форматированный текст и Markdown, списки задач, дневник и совместный доступ — альтернатива Notion и Obsidian.