资讯
消息称美光正探索开发近GPU NAND闪存以运行更大的LLM
📋总体概括
据新浪财经报道,美光正探索开发「近GPU NAND」架构,将高耐久性NAND闪存模块部署在GPU附近,用于处理无需HBM或常规DRAM级别带宽与延迟的工作负载。该方案牺牲部分密度,重点提升I/O速度、带宽和读取速度,使GPU能直接访问数百GB存储池,从而突破LLM的内存容量限制,为AI推理场景提供HBM之外的低成本扩展路径。
⚡关键信息
- ▸美光正探索「近GPU NAND」方案,将NAND闪存部署在更靠近GPU的位置
- ▸该架构针对不需要HBM或常规DRAM那样高延迟、高带宽的工作负载
- ▸重点提升I/O速度、带宽和读取速度,同时兼顾密度与耐久性
- ▸GPU将能直接访问数百GB的NAND存储池,缓解LLM运行的内存容量瓶颈
🔥犀利点评
HBM贵得离谱还产能紧缺,美光这招本质是想用NAND给AI推理找一条「够用就好」的低成本通路——推理不像训练那样狂飙带宽,数百GB池子直接挂GPU确实诱人。但NAND的读写延迟和耐久度硬伤摆在那,别被「探索」二字冲昏头:这更像对SK海力士、三星HBM霸权的侧面突围,真落地还得看I/O提速的实际成色。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 36氪快讯 阅读全文 →