王炸！DeepSeek发布收官

文章预览

【导读】DeepSeek“开源周”今日正式收官             中国基金报记者 忆山             2月28日，在“开源周”第五天，DeepSeek宣布开源Fire-Flyer文件系统（3FS），以及基于3FS的数据处理框架Smallpond。             Fire-Flyer文件系统（3FS）是一种利用现代SSD和RDMA网络的全部带宽的并行文件系统，是所有DeepSeek数据访问的助推器。             其特点有：180节点集群中的聚合读取吞吐量为6.6TiB/s；25节点集群中GraySort基准测试的吞吐量达3.66TiB/min；每个客户端节点的KVCache查找峰值吞吐量超过40GiB/s；具有强一致性语义的分解架构；在V3/R1中进行训练数据预处理、数据集加载、检查点保存/重新加载、嵌入向量搜索和KVCache查询推理。             Smallpond是轻量级的数据处理框架，其特点是基于DuckDB的高性能数据处理可扩展性，能够处理PB级别数据集无需持续 ………………………………