跳转至

AI 存储——训练 I/O 和推理 KV Cache 的数据底座

训练一轮次要读上亿张小图片、检查点动辄几十上百 GB、推理要持续命中 KV Cache——AI 工作负载把存储推到了一个尴尬的位置:既要像本地盘一样快,又要像对象存储一样能扩。

本目录覆盖三种思路:

系统 定位 核心思路
JuiceFS 通用分布式文件系统 数据与元数据分离,兼容 POSIX,对接 S3/HDFS/MinIO 等后端
DeepSeek 3FS 训练专用高性能存储 面向大规模模型训练的并行文件系统架构
ICMS 推理 KV Cache 存储 NVIDIA 推理上下文内存存储架构解析

文档

JuiceFS

DeepSeek 3FS

ICMS

相关资源