HadaFS：新型Burst Buffer文件系统

文章预览

本篇文章发表于顶级会议 FAST 2023，由无锡国家超级计算中心、清华大学、山东大学、中国工程院的学者为我们分享了他们在尖端超级计算机和高性能计算领域的最新的成果，提出了一种名为 HadaFS 的新型 Burst Buffer 文件系统，实现了可扩展性和性能的优势与数据共享和部署成本的优势的良好结合。 一、背景   高性能计算（HPC）正在经历计算规模和数据爆发式增长的时代。为了满足 HPC 应用 不断增长的 I/O 需求或突发流量 I/O 性能需求 ，研究人员提出 Burst Buffer（BB）技术，通过 SSD 等新型存储介质构建数据加速层，作为前端计算和后端存储之间的缓冲区，为 HPC 应用提供高速 I/O 服务，提高了系统的性能。 取决于 SSD 阵列的部署位置 ，BB可以分为两种类型：            1）本地BB ，即SSD作为本地磁盘部署在每个计算节点上，专门为单个计算节点服务 ………………………………