0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

英伟达、微软、亚马逊等排队求购SK海力士HBM芯片,这些国产设备厂迎机遇

Carol Li 来源:电子发烧友网 作者:李弯弯 2023-07-06 09:06 次阅读

电子发烧友网报道(文/李弯弯)据报道,继英伟达之后,全球多个科技巨头都在竞购SK海力士的第五代高带宽内存HBM3E。半导体行业知情人士称,各大科技巨头都已经在向SK海力士请求获取HBM3E样本,包括AMD、微软和亚马逊等。

HBM(高带宽存储器),是由AMD和SK海力士发起的基于3D堆栈工艺的高性能DRAM,适用于高存储器带宽需求的应用场合。如今HBM已经发展出HBM2、HBM2e以及HBM3。HBM3E是HBM3的下一代产品,SK海力士目前是唯一能量产HBM3的厂商

HBM成为AI芯片中存储主流方案

HBM是一种高带宽内存技术,它采用了3D堆叠技术,将多个DRAM芯片堆叠在一起,形成一个高密度、高带宽的内存模块。

随着时间发展,存储器与处理器性能差异逐渐扩大,当存储器访问速度跟不上处理器数据处理速度时,存储与运算之间便筑起了一道“内存墙”。而随着人工智能、高性能计算等应用市场兴起,数据量指数级增长,“内存墙”问题也愈发突出。

存储器带宽是指单位时间内可以传输的数据量,要想增加带宽,最简单的方法是增加数据传输线路的数量。HBM能够通过系统级封装(SIP)和硅通孔(TSV)技术实现垂直堆叠,拥有多达1024个数据引脚,可显著提升数据传输速度,因此成为AI芯片中存储的主流技术方案。

英伟达、AMD等企业高端AI芯片大多搭载HBM。据了解,英伟达历代主流训练芯片基本都配置HBM,其2016年发布的首个采用帕斯卡架构的显卡TeslaP100已搭载了HBM2,随后TeslaV100也采用了HBM2;2017年初,英伟达发布的Quadro系列专业卡中的旗舰GP100也采用了HBM2;2021年推出的TeslaA100计算卡也搭载了HBM2E,2022年推出了面向大陆地区的A800,同样也配置HBM2E;2022年推出了市面上最强的面向AI服务器的GPU卡H100,采用的HBM3。

AMD今年6月推出的号称是最强的AI芯片MI300X,就是搭载由SK海力士及三星电子供应的HBM。AMD称,MI300X提供的HBM密度最高是英伟达AI芯片H100的2.4倍,其HBM带宽最高是H100的1.6倍。这意味着,AMD的芯片可以运行比英伟达芯片更大的模型。

苏姿丰介绍,MI300X可以支持400亿个参数的Hugging Face AI模型运行,并演示了让这个LLM写一首关于旧金山的诗。这是全球首次在单个GPU上运行这么大的模型。单个MI300X可以运行一个参数多达800亿的模型。

另外,谷歌也将于2023年下半年扩大与Broadcom合作开发AISC,其AI加速芯片TPU亦采搭载HBM存储器,以扩建AI基础设施。

目前,英伟达、AMD、微软和亚马逊等科技巨头都在向SK海力士申请下一代HBM3E样本,SK海力士正忙于应对客户对HBM3E样品的大量请求。报道称,英伟达是第一家申请HBM3E送样的客户;申请的客户或许年底前即可收到样品。

由于HBM3E需求暴增,SK海力士已决定明年大扩产、采用最先进的10nm等级第五代(1b)技术,多数新增产能将用来生产HBM3E。

大模型带动HBM市场需求高增长

大模型的发展正在带动HBM的市场需求。近大半年时间,国内外科技互联网龙头企业都在参与大模型的研发,国外的包括谷歌、微软、Meta、Open AI,英伟达等,国内的包括百度、华为、阿里、腾讯、商汤、可达讯飞、昆仑万维、云知声等。

服务器是算力的核心基础设施,大模型数据量的指数级增长拉升AI服务器需求大幅提升。根据机构调研,目前高端AI服务器GPU搭载HBM芯片已成主流,预计2023年全球HBM需求量将增近六成,达到2.9亿GB,2024年将再增长30%。

这对于HBM企业及上游产业链来说无疑都是好消息。目前市场上的HBM主要由SK海力士、三星、美光三家厂商供应,根据2022年数据,三家公司的市场占有率分别为50%、40%、10%。其中,预计2023年SK海力士将受益HBM3产品的量产,市占率有望提升至53%。

在HBM领域,SK海力士走在业界前列,2014年SK海力士与AMD联合开发了全球首款硅穿孔HBM产品,其带宽高于GDDR5产品。2022年6月实现HBM3的量产,并向英伟达大量供货,配置在英伟达高性能GPUH100之中。

三星紧随其后,在HBM领域的发展也较为顺利,于2016年首次量产HBM2产品,同时发布了4GB和8GB的HBM2 DRAM。2024年预计实现接口速度高达7.2Gbps的HBM3P,2025年在新一代面向AI的GPU中见到HBM3P的应用。

在三家公司中,美光稍有落后,其于2020年7月宣布大规模量产HBM2E,HBM3在研发中。

除了这几家公司之外,上游相关半导体设备、材料等企业预计也将会在这波AI大模型浪潮中受益。比如,硅通孔技术(TSV)是HBM的核心技术之一,中微公司是TSV设备的主要供应商,TSV为连接硅晶圆两面并与硅衬底和其他通孔绝缘的电互连结构,可以穿过硅基板实现硅片内部垂直电互联,是实现2.5D、3D先进封装的关键技术之一,主要用于硅转接板、芯片三维堆叠等方面。

中微公司在2010年就推出了首台TSV深孔硅刻蚀设备Primo TSV®,提供的8英寸和12英寸硅通孔刻蚀设备,均可刻蚀孔径从低至1微米以下到几百微米的孔洞,并具有工艺协调性。

再比如,ALD沉积(单原子层沉积)在HBM工艺中不可或缺,雅克科技是ALD前驱体核心供应商,拓荆科技是ALD设备核心供应商。由于ALD设备可以实现高深宽比、极窄沟槽开口的优异台阶覆盖率及精确薄膜厚度控制,在HBM中先进DRAM加工工艺和TSV加工工艺中是必不可少的工艺环节。

雅克科技是国内ALD沉积主要材料前驱体供应商,公司前驱体产品供应HBM核心厂商SK海力士,High-K、硅金属前驱体产品覆盖先进1bDRAM、200层以上3DNAND以及3nm先进逻辑电路等。

拓荆科技是国内ALD设备的主要供应商之一,公司PEALD产品用于沉积SiO2、SiN等介质薄膜,在客户端验证顺利;Thermal-ALD产品已完成研发,主要用于沉积Al2O3等金属化合物薄膜。

此外,还有华海诚科、联瑞新材、国芯科技、长电科技等企业,也表示相关技术和产品可以用于HBM中。比如,华海诚科的颗粒状环氧塑封料用于HBM的封装,已通过部分客户认证;国芯科技表示,目前正在研究规划合封多HBM内存的2.5D的芯片封装技术。

小结

如今国内外互联网、科技企业都已经纷纷参与大模型的研发,而且从目前的情况来看,不少企业已经在推进大模型在各行业中的落地应用。无论是研究过程中的训练,还是落地部署中的推理,大模型由于数据量庞大,都离不开HBM的支持。

可以看到,在大模型发展的带动下,HBM的市场需求正在快速增长。而除了SK海力士、三星、美光等供应HBM的企业之外,上游相关的半导体设备、材料等企业也能从中获益。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3327

    浏览量

    87768
  • HBM
    HBM
    +关注

    关注

    0

    文章

    231

    浏览量

    14382
收藏 人收藏

    评论

    相关推荐

    SK海力士将采用台积电7nm制程生产HBM4内存基片

    HBM内存基础裸片即DRAM堆叠基座,兼具与处理器通信的控制功能。SK海力士近期与台积电签订HBM内存合作协议,首要任务便是提升HBM基础逻
    的头像 发表于 04-23 16:41 308次阅读

    SK海力士与台积电共同研发HBM4,预计2026年投产

    HBM3E(第五代 HBM 产品)起,SK海力士HBM 产品基础裸片均采用自家工艺生产;然而,从 HMB4(第六代
    的头像 发表于 04-19 10:32 234次阅读

    刚刚!SK海力士出局!

    来源:集成电路前沿,谢谢 编辑:感知芯视界 Link 3月25日消息,据报道,由于SK海力士部分工程出现问题,英伟达所需的12层HBM3E内存,将由三星独家供货,
    的头像 发表于 03-27 09:12 177次阅读

    英伟达寻求从三星采购HBM芯片

    英伟达正在寻求与三星建立合作伙伴关系,计划从后者采购高带宽存储(HBM芯片HBM作为人工智能(AI)芯片的核心组件,其重要性不言而喻。与
    的头像 发表于 03-25 11:42 387次阅读

    SK海力士计划斥资10亿美元提高HBM封装能力

    在人工智能这一科技浪潮的推动下,高带宽存储芯片HBM)已成为市场竞逐的焦点。作为半导体行业的佼佼者,SK海力士敏锐地捕捉到了这一重要机遇
    的头像 发表于 03-08 10:56 339次阅读

    SK海力士扩大对芯片投资

    SK海力士正积极应对AI开发中关键组件HBM(高带宽存储器)日益增长的需求,为此公司正加大在先进芯片封装方面的投入。SK
    的头像 发表于 03-08 10:53 452次阅读

    AIGC热度高涨,SK海力士今年HBM已经售罄,国产厂商有哪些机会?

    售罄。”   值得注意的是,此前市场研究机构Yolo Group报告指出,2023年HBM芯片的平均售价是传统DRAM内存芯片的五倍。然而,市场热度在AIGC的带动下依然有增无减。   SK
    的头像 发表于 02-28 00:16 2313次阅读

    SK海力士预计3月量产HBM3E,供货英伟

    近日,全球存储解决方案领导者SK海力士宣布,他们已成功完成了高性能HBM3E(High-Bandwidth Memory 3rd Generation Enhanced)的开发,并且已经通过了
    的头像 发表于 02-25 11:22 436次阅读

    SK海力士宣布HBM内存生产配额全部售罄

    SK 海力士副总裁 Kim Ki-Tae 对此表示,作为 HBM 行业翘楚,海力士洞察到市场对 HBM 存储的巨大需求,现已提前调整产量,以
    的头像 发表于 02-23 14:12 297次阅读

    SK海力士拟在美国建厂生产HBM芯片

    韩国存储芯片巨头SK海力士计划在美国印第安纳州投资兴建一座先进封装工厂,专注于生产高带宽内存(HBM芯片。这一举措旨在与
    的头像 发表于 02-06 16:10 729次阅读

    英伟达与SK海力士协调2025年HBM供应

    据可靠消息来源透露,英伟达与SK海力士已开始就2025年第一季度的高带宽存储器(HBM)供应量进行协调。这一合作的背后,是双方对未来技术趋势的共同预见和市场需求的高度敏感性。
    的头像 发表于 02-01 16:41 475次阅读

    英伟达向SK海力士和美光支付巨额预付款

    据报道,英伟达为了确保其高性能内存(HBM)的稳定供应,已经采取了积极的措施。为了达到这一目的,英伟达向SK海力士和美光公司提前支付了数亿美
    的头像 发表于 01-07 17:37 1174次阅读

    追赶SK海力士,三星、美光抢进HBM3E

    电子发烧友网报道(文/黄晶晶)新型存储HBM随着AI训练需求的攀升显示出越来越重要的地位。从2013年SK海力士推出第一代HBM来看,HBM
    的头像 发表于 10-25 18:25 2222次阅读
    追赶<b class='flag-5'>SK</b><b class='flag-5'>海力士</b>,三星、美光抢进<b class='flag-5'>HBM</b>3E

    SK海力士开发出全球最高规格HBM3E,向英伟达提供样品

    该公司表示,HBM3E(HBM3的扩展版本)的成功开发得益于其作为业界唯一的HBM3大规模供应商的经验。凭借作为业界最大HBM产品供应商的经验和量产准备水平,
    的头像 发表于 08-22 16:24 584次阅读

    HBM需求高涨 三星、SK海力士投资超2万亿韩元积极扩产

    据业界透露,三星电子、sk海力士等存储半导体企业正在推进hbm生产线的扩张。两家公司计划到明年年底为止投资2万亿韩元以上,将目前hbm生产线的生产能力增加两倍以上。
    的头像 发表于 08-01 11:47 665次阅读