
PANews 2月28日消息,據DeepSeek公告,在開源周第五天,其Fire-Flyer文件係統(3FS)正式開源,作為一款高性能並行文件係統,3FS可充分利用現代SSD和RDMA網絡,實現高速數據訪問,提升AI模型訓練與推理效率。
3FS關鍵性能指標:
在180節點集群中實現6.6 TiB/s總讀取吞吐量;
在25節點GraySort基準測試中達到3.66 TiB/分鐘吞吐量;
單節點KVCache查詢峰值吞吐量超40+ GiB/s。
3FS採用分離式架構,支持數據預處理、數據集加載、檢查點存儲/恢復、嵌入向量搜索及推理KVCache查詢,具備強一致性語義。DeepSeek同步推出Smallpond數據處理框架,進一步優化3FS數據管理能力。
内容來源:PANews
更多精彩內容,請登陸
財華香港網 (https://www.finet.hk/)
現代電視 (http://www.fintv.com)