百度沧海存储统一技术底座架构演进

文章预览

本文整理自 2024 希捷数据 + 峰会的同名演讲。 随着 AI 时代的快速发展，对存储技术提出了更高的要求，尤其是在大规模、高性能和低成本方面。为了应对这些挑战，百度沧海·存储打造了一个高度可复用的统一技术底座。我们在这个统一的技术底座中解决了云存储的共性问题，让上层存储系统的迭代更高效。 首先，我将简要介绍一下百度沧海·存储统一技术底座的整体架构。 这个统一的技术底座由三个核心组件构成，分别是统一的元数据底座、统一的层级 Namespace 以及统一的数据底座 。 我们认为各种存储系统实际上是由元数据面和数据面两部分组成，通过提炼出高度可复用的元数据面和数据面的统一技术底座，就能积木式搭建各种云存储系统，比如对象存储、文件存储、块存储等，最大化减少重复开发的工作。 接下来，我将详细介绍这三个核 ………………………………