テーマ切替
Associate 認定 セクション別 学習教材集|索引
Databricks 認定データエンジニア Associate の 7 セクションについて、公式ドキュメント(日本語版)の中身を読み込んで書き起こした自習教材の索引です。 各ファイルは「リンク集」ではなく、そのファイルだけで学習が完結するよう、重要用語・概念・構文・コード例を漏らさずまとめています。
教材一覧
| # | セクション | 教材ファイル | 主な内容 |
|---|---|---|---|
| ① | プラットフォーム基礎 | 01-platform.md | レイクハウス/アーキテクチャ/Delta Lake(ACID・タイムトラベル・トランザクションログ)/クラスター・ノートブック |
| ② | データ取り込み | 02-ingestion.md | Auto Loader(cloudFiles・スキーマ推論/進化・チェックポイント)/COPY INTO/使い分け |
| ③ | データ変換・モデリング | 03-transformation.md | PySpark DataFrame/Spark SQL/UDF/MERGE INTO/メダリオン(最重要) |
| ④ | Lakeflow Jobs | 04-jobs.md | ジョブ・タスク・依存関係/トリガー・cron・リトライ/宣言型パイプライン/Expectations |
| ⑤ | ガバナンス(Unity Catalog) | 05-governance.md | 3階層ネームスペース/権限モデル(GRANT/REVOKE)/ボリューム/外部ロケーション |
| ⑥ | 最適化・トラブルシューティング | 06-optimization.md | OPTIMIZE/Z-ORDER/液体クラスタリング/予測的最適化/Spark UI 診断/VACUUM |
| ⑦ | CI/CD | 07-cicd.md | Asset Bundles(databricks.yml)/Git フォルダー/Databricks CLI |
各教材の共通構成
すべてのファイルが同じ構成です。
- このセクションの概要
- 重要用語集(日本語(English)+説明の表)
- 詳細解説(トピックごとに概念・仕組み・注意点を漏らさず)
- 構文・コード例(PySpark / SQL)
- 試験で問われるポイント
- 理解度チェックリスト(自分の言葉で説明できるか確認)
学習の進め方(推奨順)
- ①→③ で「置く・変える」の中核(Delta と変換)を固める
- ② で入口(取り込み)、④⑤ で運用とガバナンス
- ⑥⑦ で最適化と自動化
- 各ファイルの「理解度チェックリスト」を全部説明できたら、ロードマップの Phase 3(問題演習) へ
関連ドキュメント
| ファイル | 役割 |
|---|---|
| databricks-overview.md | Databricks 全体像(学習前の土台) |
| roadmap-associate.md | 週次スケジュール付きの学習ロードマップ |
| roadmap-professional.md | 上位資格(Professional)ロードマップ |
| 00-links.md | 公式ドキュメントへのリンク集(本教材の出典元) |
作成にあたっての注記
- 出典は Databricks 公式ドキュメント日本語版(主に Azure Databricks / Microsoft Learn、一部 docs.databricks.com)。各ファイル冒頭に参照した公式ページ URL を記載しています。
- エンジン概念(Delta・Spark・Unity Catalog・Lakeflow)はクラウド共通のため、AWS/GCP 利用でもそのまま使えます(クラウド固有の初期設定のみ読み替え)。
- 一部、公式ページがリンク中心でコード掲載が少なかった箇所は、本文記述に基づく一般的な構文で補い、その旨を各ファイル内に明記しています。
- 用語・数値・バージョン境界(例:DBR バージョン、保持期間、しきい値)は公式記載に基づきます。ドキュメントは更新されるため、細部は受験時点で公式を再確認してください。