DeepSeek最新发布！

文章预览

2月28日，在“开源周”第五天，DeepSeek宣布开源Fire-Flyer文件系统（3FS），以及基于3FS的数据处理框架Smallpond。 Fire-Flyer文件系统（3FS）是一种利用现代SSD和RDMA网络的全部带宽的并行文件系统，是所有DeepSeek数据访问的助推器。 其特点有：180节点集群中的聚合读取吞吐量为6.6TiB/s；25节点集群中GraySort基准测试的吞吐量达3.66TiB/min；每个客户端节点的KVCache查找峰值吞吐量超过40GiB/s；具有强一致性语义的分解架构；在V3/R1中进行训练数据预处理、数据集加载、检查点保存/重新加载、嵌入向量搜索和KVCache查询推理。 Smallpond是轻量级的数据处理框架，其特点是基于DuckDB的高性能数据处理可扩展性，能够处理PB级别数据集无需持续运行的服务，以及操作简便。 至此，DeepSeek为期五天的“开源周”活动正式收官。 2月21日，DeepSeek宣布，从2月24日起将开源5个代码 ………………………………