运营商大规模数据集群治理的实践指南(18)

2019-05-17

技术实现方案

7、第七步：重构数据血缘、元数据、数据资产管理应用

面临挑战

在某集群长期的无序建设中，由于对数据缺少平台级的运营手段，比如缺少数据库、数据表以及数据列统一的信息维护平台和整体的物理视图，导致底层数据存在过多垃圾表，且缺少对底层数据的认知；

对元数据的变更无监控无跟踪，缺少全域加工数据血缘关系，不能追溯数据加工流向，导致故障发生后不能明确影响范围，数据成本与价值也难以衡量，在安全合规为第一红线的背景下，对敏感数据也没有效跟踪；

缺少数据资产管理，没有展示数据应有的支撑能力，造成组织架构内数据服务信息不对称。

基于以上痛点，着手重构了企业级全域元数据平台，提供全域物理视图、业务视图、元数据变更跟踪监控、全域数据血缘关系图等核心功能，物理视图提升对数据的认知，业务视图展示数据支撑能力，元数据变更跟踪实时了解产线环境异常修改，数据血缘可提供数据追溯、数据成本价值洞察、敏感数据流向。

推荐阅读

上一篇：营销中国行走进福州，巨量引擎激活营销增长势能

下一篇：英伟达一季度营收超预期，盘后一度涨超7％