DeepSeek的3FS:为饥渴的AI模型而生的文件系统
DeepSeek的3FS根据访问模式将数据分为不同的“层级”:热数据(近期文件或频繁访问的训练批次)存储在靠近GPU的快速NVMe缓存中。温数据存储在SSD阵列中,适合偶尔访问的文件。冷数据(旧日志、未使用的检查点)存储在成本较低的HDD上。
DeepSeek的3FS根据访问模式将数据分为不同的“层级”:热数据(近期文件或频繁访问的训练批次)存储在靠近GPU的快速NVMe缓存中。温数据存储在SSD阵列中,适合偶尔访问的文件。冷数据(旧日志、未使用的检查点)存储在成本较低的HDD上。