2月28日,DeepSeek“開源周”第五天,今天開源的是一款為所有DeepSeek數據訪問提供動力的推進器,名為3FS。
Fire-Flyer文件系統(3FS)——一個并行文件系統,充分利用現代SSD和RDMA網絡的帶寬。180節點集群中,聚合讀取吞吐量達6.6 TiB/s;25節點集群中,GraySort基準測試吞吐量達3.66 TiB/min。
單客戶端節點的KVCache查找峰值吞吐量超過40 GiB/s;采用強一致性語義的分離式架構;支持V3/R1中的訓練數據預處理、數據集加載、檢查點保存/重載、嵌入向量搜索及推理中的KVCache查找。
DeepSeek表示,3FS旨在為DeepSeek的數據密集型任務提供高效、可靠的存儲與訪問解決方案,助力AI研究與開發。






京公網安備 11011402013531號