首页/数据/数据工程与 ETL 速查/数据集市与主题集市
本包目录(311 条)

数据集市与主题集市

数据集市面向单一主题域(交易、流量、财务)的定制化数据集合,可来自数仓公共层,也可独立建设;独立集市容易形成口径孤岛,推荐在公共层之上做轻量集市。

范围单主题域(交易/流量/财务/供应链)
依赖推荐依赖 DWD 与 DWS 公共层
内容该域内的事实、维度与指标
交付按业务方节奏迭代

集市目录组织

集市目录组织
-- 交易集市:从公共层取材,只做本域重组
CREATE VIEW mart_trade_order_daily AS
SELECT d.stat_date, o.category, SUM(o.pay_amt) AS pay_amt
FROM dws_trade_category_1d o
JOIN dim_date d ON o.date_sk = d.date_sk
GROUP BY d.stat_date, o.category;
判断集市是否健康:能否说清每个字段来自哪张公共表;说不清就说明存在私有加工。

易错点

  • 各集市独立抽取源系统,同名指标在不同集市口径不同
  • 集市直接连源库取数,绕过公共层导致质量与调度脱管

数据来源与参考

  • Kimball《The Data Warehouse Toolkit》数据集市
  • Inmon《Building the Data Warehouse》
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌