首页/数据/数仓建模速查/湖表合并任务调度策略
湖仓与引擎63 条

湖表合并任务调度策略

合并要按分区优先级调度:优先处理被频繁查询与小文件集中的分区;配合保留策略清理旧快照与孤立文件,控制元数据体积。

数仓建模速查数据更新于 2026-10-12
优先级按查询热度
范围按分区
窗口低峰期
配套快照与孤立文件清理

孤立文件清理

孤立文件清理
CALL demo.system.remove_orphan_files(
  table => 'db.trade_order',
  older_than => TIMESTAMP '2026-10-11 00:00:00'
);
孤立文件清理要设置足够的安全时间窗,避免删掉正在提交过程中的文件。

易错点

  • 清理窗口设置过短,删除写入中的临时文件

数据来源与参考

  • Apache Iceberg 官方文档:Maintenance
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌