基于主动元数据构建智能数据治理体系|京东零售技术实践

文章预览

本文作者 吕代军 参与DataFunsummit2024：数据湖架构峰会，分享京东零售技术基于主动元数据构建智能数据治理体系的实践经验。 吕代军：京东零售 数据架构师，从事数据开发与数据架构相关工作，专注于端到端数据链路优化与数据可观测体系建设，以及基于主动元数据、图技术构建智能数据治理能力，推动数据标准牵引数据集成加速 。 导读   京东零售在数据 管理和治理上面临着多方面的挑战：首先，数据量的持续增加导致了大量低效及冗余的数据模型，增加了维护成本并影响数据质量和准确性，用户找表难，用表难；其次，数据管理和开发使用相同账号资源，缺乏有效的变更管理，容易因误操作引起线上问题；再次，表数量和存储规模的增大，进一步加剧了计算、存储资源消耗。面对这些挑战，京东零售提出了一套全面的数据治理方案，包括建 ………………………………