DeepSeek开源第五弹:宣布开源3FS
2025年2月28日,DeepSeek在其官方账号上宣布了开源周的第五项重要成果——3FS(Fire-Flyer文件系统)。3FS被誉为所有DeepSeek数据访问的助推器,其强大的功能和性能令人瞩目。
3FS是一种高性能的并行文件系统,充分利用现代SSD和RDMA网络的带宽优势。在180节点集群中,3FS的聚合读取吞吐量高达6.6TiB/s,而在25节点集群的GraySort基准测试中,其吞吐量更是达到了3.66TiB/分钟。此外,每个客户端节点的KVCache查找峰值吞吐量也超过了40GiB/s。
3FS不仅具有出色的性能,还支持多样化的工作负载,包括数据准备、数据加载、检查点保存以及推理KVCache等。这些特性使得3FS成为AI训练和推理工作负载的理想选择。
DeepSeek此次开源3FS,无疑为AI数据处理领域注入了新的活力,也为开发者提供了更为强大的工具支持。
免责声明:免责声明:本文由用户上传,与本网站立场无关。财经信息仅供读者参考,并不构成投资建议。投资者据此操作,风险自担。 如有侵权请联系删除!