2

HBM“狂飙”,算力突围

 8 months ago
source link: https://awtmt.com/articles/3706181
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
neoserver,ios ssh client

HBM“狂飙”,算力突围

DoNews 发表于 2024年01月11日 12:32
摘要:得益于AI算力的需求,HBM成为香饽饽,BM市场规模有望于2024年达89亿美元,同比增长127%,预计至2026年市场规模将达127.4亿美元,对应CAGR约37%。

得益于AI算力的需求,HBM成为香饽饽。

近日据韩国 Chosun Biz报道,NVIDIA已经向SK海力士、美光,交付了700亿至1万亿韩元的预付款。虽然预付款未作具体说明,但业界普遍认为是NVIDIA为保证今年要上市的GPU产品相应所需HBM3E的物量供应。

同样在需求激增的市场环境下,存储三大巨头也在争相推进HBM生产。近期,三星、SK海力士正计划将HBM产量提高至2.5倍,美光则将在今年推出8层堆叠的AI专用HBM3E内存。对于HBM4,这三家企业也是当仁不让,相继确认开发和正式推出的时间。

TrendForce预估,2024年全球HBM的位元供给有望增长105%;HBM市场规模也有望于2024年达89亿美元,同比增长127%;预计至2026年市场规模将达127.4亿美元,对应CAGR约37%。

01. 是谁在推动HBM市场?

HBM(High Bandwidth Memory,高频宽存储器)是一种基于3D堆栈工艺的高性能DRAM,通俗来讲,就是先将很多DDR芯片堆叠在一起后,再与GPU封装在一块。正是基于Interposer中介层互联实现了近存计算,以及TSV工艺的堆叠技术,让HBM打破了内存带宽及功耗瓶颈,成为AI训练硬件的首选。

其实HBM应用已有几年的时间,自2014年首款硅通孔HBM产品问世至今,HBM技术已经发展到第五代,其中HBM3E是HBM3的扩展版本,依次类推,HBM4将是第6代产品。从HBM内存的演变来看,最新的HBM3带宽、堆叠高度、容量、I/O速率等较初代均有多倍提升。

7f8526ea-f584-4963-9109-ad9a0443c33b.png

这也恰恰是AI算力所需要的。

根据OpenAI的数据,自2012年以来,最大规模的AI训练所使用的计算量以每年10倍的速度增长。OpenAI的ChatGPT充分体现了AI训练数据集的增长。2022年11月发布的GPT-3,使用1750亿个参数构建,去年3月发布的GPT-4使用超过1.5万亿个参数。

面对这波AI浪潮, NVIDIA 创始人兼首席执行官黄仁勋曾表示:“大语言模型初创公司、消费互联网公司和全球云服务提供商都已率先行动起来,下一波浪潮蓄势待发。”当然,算力作为人工智能中关键一环,人工智能芯片供应商扮演着重要角色。

NVIDIA2023年的高端AI阵容使用HBM,包括A100/A800和H100/H800等型号。此外,NVIDIA还再进一步完善其产品组合,发布了配备HBM3E内存的H200 GPU以及GH200超级芯片,相关系统预计将于今年第二季度上市。据了解,以GH200超级芯片为例,HBM3E内存比当前HBM3快50%,可提供总计10TB/s的带宽,这使得NVIDIA GH200 Grace Hopper平台能够运行比上一版本大3.5倍的模型,同时凭借快3倍的内存带宽提升性能。

与NVIDIA“神仙打架”的AMD,在去年12月“Advancing AI”活动上,正式发布了AI旗舰GPU加速器AMD Instinct MI300X,更是宣称性能比英伟达的H100高出60%。据了解,MI300X采用HBM3内存,容量最高192GB,比前代MI250X(128 GB)高50%。该内存将提供高达5.3TB/s的带宽和896 GB/s的Infinity Fabric带宽。

同样想分AI一杯羹的,还有英特尔。据外媒报道,英特尔计划2024年发布Gaudi 3,配备最高128GB的HBM3E RAM,大幅提升AI学习和训练性能。

谁能成为NVIDIA的替代者,还需要市场的反馈。

毋庸置疑的是,这场AI竞争需要极高的算力需求,但因产能受限,供不应求成为现状,进而使HBM价格高增,HBM市场规模高速增长。

c7e285e3-ed77-46ec-9c64-0dd6b1fa5c6c.png

方正证券报告指出,从成本端来看,HBM平均售价至少是DRAM三倍;而此前受ChatGPT的拉动同时受限产能不足,HBM价格一路上涨,与性能最高的DRAM相比,HBM3的价格上涨了五倍。

02. HBM市场三分天下

在NVIDIA、AMD、英特尔三家互搏的同时,存储厂商也没有闲着,生产/扩产成主旋律。

从2013年宣布成功研发HBM1,到2019年开发出世界最快的高带宽存储器HBM2E,再到2021年10月开发出全球首款HBM3 DRAM,再到去年开发出全球最高规格HBM3E,SK海力士一直是HBM行业的领军企业。

值得关注的是,SK海力士2023年第一季度由盈转亏的DRAM仅在两个季度后扭亏为盈。

SK海力士解释道:“因高性能半导体存储器产品为中心的市场需求增加,公司业绩在第一季度低点过后持续改善,特别是面向AI的代表性存储器HBM3、高容量DDR5 DRAM和高性能移动DRAM等主力产品的销售势头良好,与上季度相比营业收入增长24%,营业损失减少38%。”SK海力士表示,将以第四代10纳米级(1a)和第五代10纳米级(1b)DRAM为中心的生产线转换,同时扩大对HBM TSV1技术的投资。

8c261ec8-f84d-4844-9466-c161389cb7e4.png

据悉,SK海力士已决定在2024年预留约10万亿韩元(约合76亿美元)的设施资本支出聚焦于为高附加值DRAM芯片扩建设施,包括HBM3、DDR5及LPDDR5,以及升级HBM的TSV先进封装技术两方面。SK海力士首席执行官Jeong-ho Park透露,预计到2030年公司HBM出货量将达到每年1亿颗。

此外,SK海力士在公司年度高层改组中,新成立的AI基础设施部门将整合分散在公司内部的高带宽内存(HBM)能力。该部门还将主导新一代HBM芯片等人工智能技术的发展,寻找并开发新市场。不难看出,SK海力士对HBM的高期望。

以TrendForce报告统计数据为参考,2022年SK海力士占据了HBM全球市场规模的50%,三星紧随其后,占比为40%。

二者皆得益于存储市场回暖的影响,从三星电子去年第三季度财报数据来看,出现了复苏的迹象。数据显示,三星电子第三季度存储业务环比增长17%至10.53万亿韩元,存储业务所在的DS部门经营亏损3.75万亿韩元,但较上季度经营亏损4.36万亿韩元有所减少。

3801b4a6-da8b-4f34-a463-9b090128da8e.png

面向未来存储市场增长的预期,三星电子收购了三星显示(Samsung Display)天安厂区内部分建筑及设备,用于HBM生产。三星电子计划在天安厂建立一条新封装线,用于大规模生产HBM,预计投资7000亿-1万亿韩元。同时,三星正在投入8层、12层HBM3量产,并开始供应8层HBM3E样品。

据悉,之前英伟达的HBM一直由SK海力士独家供应,由于需求极为庞大,三星据称也已通过质量评估,即将加入供应商队列。也有消息称,三星电子计划从今年1月开始向英伟达供应HBM3。

对2023年HBM市场份额,TrendForce预测,SK海力士和三星的HBM份额占比约为46-49%。这一数据也凸显出,SK海力士和三星的势均力敌。

如果说三分HBM市场的“天下”,最后一家企业则是美光(Micron)。美光虽然2022年市场份额仅为10%,但也不甘于落后。美光科技台中四厂正专攻HBM生产,计划将于今年量产第五代HBM3E产品。

就供应链而言,业界预测,这三家公司将为英伟达即将推出的H200和B100所需的HBM3E供应展开激烈竞争。

智能语音、ChatGPT、智能驾驶等智能化应用逐渐渗透到我们的生活中,带来了巨大的存储芯片需求。去年下半年存储芯片市场价格的反弹信号,让行业人士看到“曙光”。

从存储产业链看,SK海力士、三星等大厂采用IDM模式,一手包办了芯片的设计、制造和封测。而国内市场,存储产业链还是比较边缘,主要处于HBM上游设备和材料供应环节。但国内相关HBM概念股也有所受益。有消息称,相关厂商也在积极布局高端存储产品,以求适应市场需求和技术演进。

本文作者:田小梦,本文来源:DoNews,原文标题:《HBM“狂飙”,算力突围》

风险提示及免责条款
市场有风险,投资需谨慎。本文不构成个人投资建议,也未考虑到个别用户特殊的投资目标、财务状况或需要。用户应考虑本文中的任何意见、观点或结论是否符合其特定状况。据此投资,责任自负。

About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK