英伟达筹算准予GPU直接访谒存储 有看加快HBF

跟着AI模型的英伟予延续扩大年夜大年夜大年夜大年夜，HBM大年夜大年夜约难以知足将来显存容量的达筹需求，也促使行业将GPU驱动的算准存储架构视为埋伏的下一个技能前沿
。旧年就有消息称，直接英伟达分袂与SK海力士和铠侠合作，访谒鞭挞AI SSD的存储斥地 ，独霸量身定制的加快SSD部分庖代HBM作为GPU显存的扩大年夜大年夜大年夜大年夜器。此外本年SK海力士还与闪迪合作，英伟予带来了面向AI推理时代的达筹下一代存储器措置筹划HBF（High Bandwidth Flash） ，也是算准为体味决不异的问题
。

据TrendForce报导，直接英伟达正在鞭挞GPU直接访谒存储的访谒架构斥地，筹算从Vera Rubin平台引进
，存储启动GIDS（GPU-Initiated Direct Storage Access）下场。加快外界认为 ，英伟予这一改削大年夜大年夜约加快HBF的展开。

GIDS与现有的GDS（GPU Direct Storage）下场有所不合
，二者之间是有不合的 ：在GDS里 ，CPU在数据传输到GPU之前先向存储设备发出数据请求，而到了GIDS ，GPU直接访谒存储设备
，中心会跳过CPU和DRAM来完成。

GIDS和GDS都旨在阻拦传兼顾算架构中的数据传输瓶颈
，传说传闻微软和AMD也在试探近似的编制。次要问题仍是在于传统的数据传输编制屈就较低，CPU在线程措置上筹划受限
，而GPU则能生成数万个并行线程 。如今GPU-HBM数据传输已占琐细总功耗大年夜大年夜体一半，这进一步支撑HBF架构，将超高速的NAND闪存更接近GPU ，以应对将来的AI瓶颈。

GIDS的展示大年夜大年夜约使NAND闪存在AI存储琐细中扮演愈加次要的角色，同时加重HBM在容量方面的压力。这类改削需求功用更高的NAND闪存 ，以便跟上GPU的措置速度 。NAND闪存的优势在于位密度，约为DRAM的30倍，在邻近的占用空间下完成了更除夜的存储容量 。

可是NAND闪存的经久度无穷，而DRAM具有几近无量的写进身手。是以HBF被认为更契合存储AI模型参数，因为这部分数据在推理过程中根本贯穿连接晃荡
，仅作为只读工作负载独霸 。