Google Cloud データ基盤コース / Chapter 07
dbt応用 — ECデータをBronzeからGoldの分析モデルへ育てる
Chapter 07 で何を学び、次の章へ何を渡すのかを整理するページです。
入力を正しい名前で受ける
中間変換で複雑さを閉じ込める
Goldを意思決定の形にする
01
入力を正しい名前で受ける
Bronzeの外部テーブルをsourceとして宣言する。
生データの揺れをそのまま下流へ渡さず、stagingで型・列名・キーを整える。
マスタ系とトランザクション系では更新のされ方が違う。
- この章の入力・出力を言葉で説明できるようにする。
- 権限、品質、運用のどれが境界になるかを確認する。
02
中間変換で複雑さを閉じ込める
SilverとIntermediateは、業務指標を作る前の整形と結合を担う。
snapshotで履歴を残し、共通の結合ロジックは再利用可能なモデルに分ける。
モデル間の依存をrefで表し、変更の影響範囲を追えるようにする。
- この章の入力・出力を言葉で説明できるようにする。
- 権限、品質、運用のどれが境界になるかを確認する。
03
Goldを意思決定の形にする
DimensionとFactでスタースキーマを組み、BIが読みやすいマートを提供する。
日付パーティションとクラスタリングは、よく使う絞り込みと結合に合わせる。
速さだけでなく、指標の定義を一箇所に固定することが目的である。
- この章の入力・出力を言葉で説明できるようにする。
- 権限、品質、運用のどれが境界になるかを確認する。
TAKEAWAY
この章を終えたら
- dbt応用 — ECデータをBronzeからGoldの分析モデルへ育てるは、サービス操作ではなく責任境界を学ぶ章である。
- 次の章では、この章が渡すデータや設計判断を実装へ進める。
- 手順の成功と、利用者に届ける価値の両方を確認する。