跳动百科

DeepSeek开源第五弹:宣布开源3FS,所有Deepseek数据访问的助推器

蓝毓旭   来源:网易

DeepSeek开源第五弹:宣布开源3FS

2025年2月28日,DeepSeek在其官方账号上宣布了开源周的第五项重要成果——3FS(Fire-Flyer文件系统)。3FS被誉为所有DeepSeek数据访问的助推器,其强大的功能和性能令人瞩目。

3FS是一种高性能的并行文件系统,充分利用现代SSD和RDMA网络的带宽优势。在180节点集群中,3FS的聚合读取吞吐量高达6.6TiB/s,而在25节点集群的GraySort基准测试中,其吞吐量更是达到了3.66TiB/分钟。此外,每个客户端节点的KVCache查找峰值吞吐量也超过了40GiB/s。

3FS不仅具有出色的性能,还支持多样化的工作负载,包括数据准备、数据加载、检查点保存以及推理KVCache等。这些特性使得3FS成为AI训练和推理工作负载的理想选择。

DeepSeek此次开源3FS,无疑为AI数据处理领域注入了新的活力,也为开发者提供了更为强大的工具支持。