首页/数据/数仓建模速查/维度加载的空跑保护
维度与事实设计149 条

维度加载的空跑保护

增量源为空或水位倒退时要短路:不产生任何版本变更,并告警提示;否则容易把整表判定为变更或误关版本。

数仓建模速查数据更新于 2026-10-12
空源跳过合并并记录
水位倒退阻断并告警
最小阈值变更量异常波动告警

保护逻辑

保护逻辑
-- 水位与变更量检查后再执行合并
SELECT count(1) AS chg_cnt FROM changed_keys;
-- chg_cnt = 0 或 > 昨日 5 倍时终止并告警
保护规则按表配置阈值,写进调度平台的检查节点。

易错点

  • 空源照常执行,出现全表伪变更
  • 水位回退未检测,重复消费旧数据

数据来源与参考

  • 数仓调度实践:数据量波动防护
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌