HBM(高带宽内存)之所以成为AI算力的核心命脉,原因其实很直白:传统内存瓶颈正在扼杀GPU的潜力。过去几年,AI模型参数从十亿级飙升到万亿级,训练时计算单元(如GPU)每秒钟可以处理海量矩阵运算,但若数据搬运速度跟不上,计算核心就得干等着——这就是“内存墙”。HBM正是被设计来砸穿这堵墙的。
与DDR5或GDDR6相比,HBM的逻辑完全不同。它通过硅中介层(interposer)将多个DRAM die垂直堆叠,并在裸片间用TSV(硅通孔)互连,这样数据通道宽度可以做到1024位甚至更宽,远超传统内存的64位。以HBM3E为例,单颗带宽可达1.2TB/s以上,而GDDR6X只有约1TB/s,更关键的是HBM在同等带宽下的功耗降低约40%。这意味着,当英伟达的H100搭载80GB HBM3时,其显存带宽达到3.35TB/s,而上一代A100仅2.0TB/s。没有HBM,大模型训练时间将成倍拉长,推理延迟也会高得无法接受。
一个常被忽视的点是:HBM最初为GPU和超级计算机设计,但AI的算力需求恰好完美匹配了它的先天优势。Transformer架构的Attention层需要频繁读写大量中间结果(KV Cache),这极度依赖内存带宽;而混合专家模型(MoE)则需要在不同专家之间快速切换权重,对随机访问延迟极其敏感。HBM的高并行度和低延迟正好满足这些需求。美光最新财报显示其HBM产品营收环比暴增,同时签下16项长期协议锁定220亿美元收入,这种确定性背后是超大规模云厂商(如微软、谷歌)对HBM采购近乎“包产”的举动——因为它们清楚,没有HBM,AI集群的算力利用率就卡在60%以下。
国内存储产业链在HBM领域的追赶才刚刚开始。HBM的制造难度远超普通DRAM:需要先进封装(比如CoWoS)和极高良率的TSV工艺。目前全球仅有SK海力士、三星和美光具备量产HBM3E的能力。国产厂商如长鑫存储、通富微电在封测和设计端已有突破,但要达到HBM3E的16层堆叠和1.2TB/s带宽,还需跨越工艺和专利壁垒。不过,美光的景气外溢将带动设备、材料(如封装胶、光刻胶)订单释放,相关标的值得长期跟踪。
AI存储题材最近被热炒,但HBM的供需紧张并非新故事。产能扩张需要18-24个月,而HBM4已在研发中,数据速率将翻倍。若市场短期情绪推高高估值,需注意回调风险。真正有价值的是那些能切入HBM封测或主控芯片设计的公司,而非单纯炒概念的个股。
说到底,HBM不只是一块内存,它是AI算力利用率的“咽喉”——通道越宽,算力越能畅饮数据。这个逻辑,未来两三年都不会变。
参与讨论
感觉HBM这概念被吹得有点过了😂
不懂就问,这个跟普通内存有啥区别啊?🤔
HBM4要翻倍带宽,现在买HBM3是不是49年入国军?
确实,没HBM大模型训练得等到猴年马月
之前搞过相关项目,封装良率真是大坑
又是说国产替代,哪那么容易
还得看能效比,HBM功耗低才是真香
不一定吧,有些算法对带宽没那么敏感
那如果跑推理用GDDR6行不行?
英伟达这波布局确实牛啊
跳过HBM4直接等HBM5?hhh
就我一个人觉得这文章像广告吗?