第 2 章元数据中心
老汤姆:“在上次月会复盘时,大家反馈了一些问题,如表信息
等无处可查,在表字段信息发生变更时难以评估对下游的影响等,而
且常常上游执行变更了,下游却未收到变更通知。”
小风:“嗯,确实是,目前对于数据平台相关信息的查询主要是
通过人问人或者 Wiki(内部文档平台)等进行查询的。同时,在每次发
生变更时,我们都在尽全力进行周知,但因为缺少血缘链路,一方面
我们在进行周知时,可能有遗漏(原本应该被周知到的下游未被周知
到,导致部分变更工作的衔接脱节);另一方面我们可能对下游造成不
必要的打扰(原本本次变更不会对该下游产生影响,但因怕遗漏,所
以我们无差别地对其进行了周知)。“
老汤姆:“那针对这些老大难问题,你是否有系统化的解决方案
呢?“
小风:“是的,目前我们正在规划元数据中心,有了元数据中心,
我们就可以较好地解决这些问题。”
1.系统、全面地查询元数据信息
通过元数据中心,我们可以系统、全面地查询到各个表、指标的
元数据信息和血缘信息。例如,通过元数据中心,数据部门能比较轻
易地获取表的描述信息、表如何使用的信息,以及表字段及下游引用