跳动百科

DeepSeek 开源第五枪:开创AI分布式存储新时代

浦旭烟   来源:网易

DeepSeek开源第五枪:开创AI分布式存储新时代

DeepSeek在开源周的第五天,发布了其高性能并行文件系统——Fire-Flyer文件系统(3FS)。这款专为AI和高性能计算(HPC)设计的文件系统,支持大规模数据存储和高速数据访问。在180节点集群中,3FS实现了6.6 TiB/s的总读取吞吐量,性能远超传统存储方案。其KVCache功能也展现出卓越性能,峰值吞吐量超过40 GiB/s,显著提升数据查询速度。

3FS采用强一致性的分布式架构,确保数据一致性,同时解耦架构提高了系统灵活性和可扩展性。它不仅为AI训练提供稳定数据支持,还能在推理过程中加速,提高AI应用整体运行效率。

DeepSeek通过3FS的开源,不仅为全球AI领域提供了前沿技术支持,也展示了中国企业在技术研发上的深厚积累和创新能力。此举预计将在AI、大数据处理和高性能计算领域带来更多突破,推动AI分布式存储新时代的到来。