当前位置:首页 > 报告详情

电子行业:存储是Tokens的积分产业链空间广阔-251214(23页).pdf

上传人: L**** 编号:993794 2025-12-17 23页 2.01MB

下载:

1、存储是Tokens的积分,产业链空间广阔核心观点:存储是Tokens的积分,推理驱动AI存储快速增长。AI服务器中的存储主要包括HBM、DRAM、SSD等,呈现性能逐级下降、容量逐级增加、成本逐级降低特征。推理驱动AI存储快速增长。(一)内存受益于超长上下文和多模态推理需求,处理大量序列数据或多模态信息时,高带宽与大容量内存可降低访问延迟、提升并行效率。(二)SSD和HDD是Tokens的积分。随着AI推理需求快速增长,轻量化模型部署推动存储容量需求快速攀升,预计未来整体需求将激增至数百EB级别。一、存储是Tokens的积分,推理驱动AI存储快速增长AI服务器中的存储主要包括HBM、DRAM、

2、SSD等。AI服务器中的存储主要包括HBM、DRAM、SSD等,呈现性能逐级下降、容量逐级增加、成本逐级降低特征。访问频繁或者随时变更的数据会保留在较高的存储层,例如性能高的层次如CPU/GPU缓存、高带宽内存(HBM)和动态RAMS;而鲜少访问或需要长期保存的数据将移动到较低的存储层,例如SSD和硬盘驱动器。(divcenter)图1:服务器中的存储主要包括GPU中HBM、CPU中DRAM、显存以及SSD等(/divcenter)AI推理中的分级存储协同支撑高效计算。HBM集成于GPU内部,为权重和激活值提供高带宽临时缓冲,支撑并行计算和低延迟推理。DRAM作为系统内存,存储中间数据、批处理

3、队列及模型输入输出,实现CPU与GPU间高效数据传递。本地SSD用于实时加载模型参数和数据,满足高频读写需求,并存储短期检查点与临时生成内容,支撑快速迭代。HDD提供经济大容量,用于保存原始数据、历史检查点及生成内容,保障系统长期运行与数据安全。整体来看,HBM与DRAM提供即时高性能支撑,SSD保证快速可用数据,HDD则保障容量与可靠性,构建从高速临时访问到长期存储的完整AI推理生态。二、AI推理驱动存储需求增长,产业链空间广阔(一)AI&存储服务器用eSSD空间广阔AI推理与数据存储构成eSSD核心增量需求场景。在AI应用体系中eSSD主要用于训练、推理及数据存储。在训练阶段,eSSD用于

4、Checkpoint保存、模型加载及系统引导。在推理阶段,长上下文产生的KVCache以HBM/DRAM为首选热存储,超过内存容量的热数据会外溢至高性能eSSD承接;此外,RAG数据库用于大规模知识检索与上下文扩展,亦依赖eSSD提供大容量与高吞吐支持。在数据存储阶段,eSSD用于tokens的保存、数据清洗与ETL流程。随着长上下文推理、RAG数据库及tokens规模的快速增长,AI工作负载对高带宽、大容量eSSD的需求将持续增强,AI服务器、存储服务器中的eSSD市场空间将进一步扩大。AI服务器用eSSD出货量不断扩大。我们对AI服务器用eSSD市场空间进行测算,基于以下关键假设:根据Nv

5、idiaNVL72byHPE白皮书,每个计算tray的缓存盘总容量为30TB(由8块3.84TBNVMeSSD组成),操作系统盘为1块1.92TBNVMeSSD,即单GPU对应2个本地SSD卡槽。我们假设单GPU对应2个本地SSD卡槽;单卡槽对应的eSSD容量为4TB。按照上述满插假设计算,2024、2025、2026年AI服务器用eSSD市场空间分别为59EB、89EB、120EB。该测算反映的是AI服务器用eSSD理论最大市场空间,实际部署中部分服务器可能未满配,因此实际出货量可能低于该数值。存储服务器用eSSD出货量增速更为明显。我们对eSSD市场结构进行拆分,基于以下关键假设:(1)参

6、考TrendForce数据,2024年AI相关SSD采购能力将超过45EB;参考yole数据,AI服务器用eSSD出货量占服务器eSSD出货量1/3;并参考McKinsey数据,2024年eSSD市场规模为181EB,由此测算2024年通用服务器、AI服务器、存储服务器用eSSD市场规模分别为90EB、45EB、46EB;(2)参考yole数据,2024-2030年全球eSSD出货量CAGR达26%。从结构上看,eSSD主要用于通用服务器、AI服务器及存储服务器,假设2024-2030年出货量CAGR分别为12%、20%、54%,由此测算2030年通用服务器、AI服务器、存储服务器用eSSD市

word格式文档无特别注明外均可编辑修改,预览文件经过压缩,下载原文更清晰!
三个皮匠报告文库所有资源均是客户上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作商用。
根据文章内容,本文主要观点如下: 1. AI服务器中的存储主要包括HBM、DRAM、SSD等,呈现性能逐级下降、容量逐级增加、成本逐级降低特征。推理驱动AI存储快速增长,内存受益于超长上下文和多模态推理需求,SSD和HDD是Tokens的积分。 2. AI推理驱动存储需求增长,产业链空间广阔。AI&存储服务器用eSSD空间广阔,MRDIMM有望应用于大模型推理,SPD&VPD芯片空间广阔,CXL存储池化助力AI推理。 3. 投资建议:AI驱动存储价格持续上涨,原厂毛利率显著提升;DRAM和NAND架构升级,设备需求迎来新机;存储代工模式迎来产业变革机会;接口芯片MRDIMM和VPD打开新空间;建议关注存储产业链相关标的。 4. 风险提示:AI产业发展以及需求不及预期;AI服务器出货量不及预期,国产厂商技术和产品进展不及预期。
"AI时代,存储升级哪家强?" "推理驱动,存储市场潜力大吗?" "CXL技术,AI存储新引擎?"
客服
商务合作
小程序
服务号
折叠