生成AIの学習コース、論文まとめ、面接対策資料、コードノートブックを、学習の道筋とスキルレベル別に整理したキュレーション集。
DataExpert-io/data-engineer-handbook
データエンジニアリングを学ぶ人向けに、書籍、コミュニティ、講座、ツール、ブログなどの学習リソースを集めたリンク中心のハンドブック。
- スター
- 44,565
- フォーク
- 9,361
- 未解決の Issue
- 48
- 最終コミット
- 3 か月前
これは何?
Data Engineering Handbookは、データエンジニアリングを学ぶ人や、実務に携わる人向けに、厳選したリソースを幅広くまとめたリストです。入門ロードマップ、ブートキャンプ教材、おすすめの書籍、コミュニティ、ニュースレター、ポッドキャスト、用語集、認定資格、講座などのセクションに分かれています。
ツールのセクションでは、Airflow、Dagster、Prefectなどのオーケストレーションプラットフォーム、Apache IcebergやDelta Lakeなどのレイクハウス向けテーブルフォーマット、ClickHouseやDuckDBなどのデータウェアハウスやOLAPエンジン、データ統合・品質管理ツールといったカテゴリごとに分野を整理しています。大企業のエンジニアリングブログ、データエンジニアリング関連のホワイトペーパー、YouTube、LinkedInなどのソーシャルプラットフォームで活動するクリエイターの一覧も掲載しています。
このリポジトリは、体系的な学習の出発点を探している初心者や、特定のリソースやツールカテゴリをすばやく見つけたい実務者を対象としています。DataExpert.ioのブートキャンプ教材とあわせて管理されており、掲載項目の多くは、同サービスやその他の有料・無料講座へのリンクになっています。
主な機能
- 01書籍、コミュニティ、ニュースレター、ポッドキャスト、用語集を分野別に整理
- 02オーケストレーション、レイクハウス、データウェアハウス、OLAP、データ品質ツールへのカテゴリ別リンク
- 03Netflix、Uber、Airbnbなどの企業が運営するエンジニアリングブログを収録
- 04データエンジニアリング関連のホワイトペーパーや認定試験を一覧化
- 05YouTube、LinkedIn、X、Instagram、TikTokで活動するデータエンジニアリング関連クリエイターの一覧
ユースケース
- データエンジニアリングを始める際に、体系的な学習ロードマップを見つける
- オーケストレーションやデータ品質など、特定の段階で使えるツールを探す
- より深く学ぶための基礎的な論文や参考書を見つける
- 業界ニュースを追うために、フォローするコミュニティ、ニュースレター、ポッドキャストを選ぶ
使う前に知っておきたいこと
- このリポジトリは、インストール可能なソフトウェアではなく、厳選されたリンクやリソースの一覧です。
- このリポジトリにはライセンスが指定されていません。
収録されている特集
トピック
よくある質問
- data-engineer-handbook とは?
- データエンジニアリングを学ぶ人向けに、書籍、コミュニティ、講座、ツール、ブログなどの学習リソースを集めたリンク中心のハンドブック。 Data Engineering Handbookは、データエンジニアリングを学ぶ人や、実務に携わる人向けに、厳選したリソースを幅広くまとめたリストです。入門ロードマップ、ブートキャンプ教材、おすすめの書籍、コミュニティ、ニュースレター、ポッドキャスト、用語集、認定資格、講座などのセクションに分かれています。
- data-engineer-handbook は無料で使えますか?ライセンスは?
- data-engineer-handbook にはライセンスが明記されていません。コードは公開されていますが、ライセンスがない場合は再利用の許諾がないため、利用前に作者に確認することをおすすめします。
- data-engineer-handbook は今もメンテナンスされていますか?
- 半年以内に更新あり。data-engineer-handbook の最終コミットは 2026年8月3日 です。
- data-engineer-handbook は何に使えますか?
- データエンジニアリングを始める際に、体系的な学習ロードマップを見つける オーケストレーションやデータ品質など、特定の段階で使えるツールを探す より深く学ぶための基礎的な論文や参考書を見つける 業界ニュースを追うために、フォローするコミュニティ、ニュースレター、ポッドキャストを選ぶ
- data-engineer-handbook はどこで入手できますか?
- ソースコードとインストール手順は GitHub にあります:https://github.com/DataExpert-io/data-engineer-handbook
概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。
関連プロジェクト
初心者向けの入門書から並行処理、パフォーマンス、システム設計などの上級トピックまで、Go(Golang)の書籍を多言語でまとめた厳選リストです。
Djangoでの開発に役立つサードパーティ製パッケージ、ツール、チュートリアル、資料を集めたコミュニティ運営のリストです。
プログラミング、Web開発、機械学習、サイバーセキュリティなどを教える英語のYouTubeチャンネルをまとめた厳選リスト。
Scala、Java、Python、RのAPIを備えた、大規模データ処理向けの統合分析エンジン。
テーブル、データセット、MLモデル、レポートなどのデータアセットを定義・実行・監視するPythonオーケストレーションプラットフォーム。