首页/数据/数仓建模速查/OLAP 冷热分层与数据搬运
湖仓与引擎63 条

OLAP 冷热分层与数据搬运

实时分析库容量有限:热数据留在 OLAP 集群、历史数据沉到湖表;查询端可用视图或联合查询把冷热结果合并,降低存储成本。

数仓建模速查数据更新于 2026-10-12
热近期数据在 OLAP
冷历史沉湖表
合并视图/联邦查询
搬运按分区同步

冷热合并视图

冷热合并视图
CREATE VIEW dw.v_trade_store_day AS
SELECT store_id, dt, order_cnt, pay_amt FROM dw.dws_trade_store_day_recent
UNION ALL
SELECT store_id, dt, order_cnt, pay_amt FROM lake.dws_trade_store_day_history;
搬运窗口要覆盖业务回溯期(如 90 天),否则跨期对比查询会缺数。

易错点

  • 历史数据过早下沉,运营查询回溯整年缺数据

数据来源与参考

  • Apache Doris 官方文档:Cold Hot Separation
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌