首页/数据/数据工程与 ETL 速查/数据地图与元数据
本包目录(311 条)

数据地图与元数据

数据地图(元数据平台)登记表结构、字段含义、负责人、更新频率、分区信息与血缘,是找数、认责与影响分析的基础设施;元数据可从引擎与调度系统自动采集,再补充业务说明。

技术元数据库表结构、分区、存储、任务依赖
业务元数据字段含义、指标口径、负责人
能力搜索、字段级血缘、影响分析、质量标签
采集从 Metastore 与调度平台定时同步

元数据登记要点

元数据登记要点
表名 / 中文名 / 分层 / 主题域
负责人(团队与联系人)
更新频率与调度任务
分区字段与最新分区
字段含义与枚举取值说明
表说明与字段注释缺失时,数据地图只能提供表名搜索,价值大打折扣。

易错点

  • 建表不写注释,半年后无人能解释字段含义
  • 元数据只采集不治理,血缘里一堆废弃任务干扰判断

数据来源与参考

  • Apache Atlas 官方文档(元数据与血缘管理)
  • 行业数据治理实践
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌