栏目分类
热点资讯
开心色五月 DeepSeek 开源程度 5/5: 开源3FS, 数据走访速率打破极限
发布日期:2025-06-25 21:46 点击次数:84
IT之家2月28日音信,DeepSeek在开源周第五天发布了3FS(Fire-FlyerFileSystem),这是一个专为充分诈欺当代SSD和RDMA网罗带宽而贪图的并行文献系统。该系统展现了惊东谈主的数据走访性能开心色五月,为深度学习等数据密集型应用提供了宏大的复旧。
IT之家附上开源地址:https://github.com/deepseek-ai/3FS
3FS性能亮点开心色五月
集群高蒙胧:在180节点集群中,3FS达成了高达6.6TiB/s的团员读取蒙胧量。
基准测试优异:在25节点集群的GraySort基准测试中,3FS达到了3.66TiB/min的蒙胧量。
单节点高性能:每个客户端节点的KVCache查找峰值蒙胧量朝上40GiB/s。
架构先进:3FS遴荐去中心化架构,并具备强一致性语义。
3FS应用场景
3FS在DeepSeek的V3/R1版块中赢得鄙俗应用开心色五月,涵盖了锻练数据预继续、数据集加载、查验点保存/从头加载、镶嵌向量搜索以及推理进程中的KVCache查找等要津体式。此外,DeepSeek还开源了基于3FS的数据继续框架Smallpond。