0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

继续加大产量,HBM成内存厂商的新宠儿

E4Life 来源:电子发烧友网 作者:周凯扬 2023-08-15 01:14 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/周凯扬)随着AI芯片逐渐成为半导体市场的香饽饽,与之相关的附属产物也在不断升值,被一并炒热。就拿高带宽内存HBM来说,无论是英伟达GPU芯片,还是初创公司打造的AI芯片,又或是大型CSP自研的服务器芯片,都开始引入HBM。

成为新时代另一主流的HBM

过去HBM主要用于AMD或英伟达的高端GPU产品中,这与成本息息相关,比如额外的硅中介层、更大的封装等,增加的系统成本使得HBM只会出现在一些顶级消费级产品中,甚至两者最终都在消费级产品上放弃了HBM,改用于数据中心这样的企业级场景。

可随着人工智能/机器学习的需求驱动这类产品用量增长,内存墙的瓶颈开始显现。我们不再缺超高性能的CPU,缺的反而是超高性能的GPU/AI加速器,以及更高带宽的内存,应对大量低延时的数据移动。

所以HBM被认为是AI/ML时代下的首选内存,为某些算法提供了训练所需的最大带宽,比如最近英伟达公布的第二代Grace Hopper Superchip,就分成了不同GPU内存配置的版本,率先推出的是搭载96GB HBM3的版本,明年第二季度将推出搭载144GB HBM3e的版本。

HBM的市场供应已经发生变动

要说HBM的供应商,主要是SK海力士、三星和美光。TrendForce通过当下各大供应商的生产计划数据分析,内存厂商正在提高其产能,比如扩大TSV产线等。预计到2024年,HBM供应将增加105%。其中SK海力士因为收获了来自英伟达的大量订单,所以尚且占据头号交椅的位置。而在三星的奋起直追下,已经拉近了与SK海力士的市占比距离。

三星作为存储厂商和晶圆代工厂,既提供了HBM方案也提供了对应的多HBM封装方案,这种一站式的方案也收获了更多的订单。根据韩媒的报道,三星与可能会与英伟达在年末达成服务与供应协议,为英伟达的H100以之后搭载HBM3的芯片提供HBM产能,

至于美光虽然也有HBM产品,但主要优势还是在传统内存上。可随着生成式AI一炮走红之后,美光也开始决心在HBM产品上奋起直追。比如上个月底,美光就基于其先进的1β工艺节点,发布了业界首个8-high 24GB HBM3第二代产品,带宽可达1.2TB/s以上,并宣布已经开始送样。

美光也在通稿中专门提到了该HBM产品对于GPT-4等生成式AI应用起到的助力,比如为AI推理提供更高的能效比,以及为运营者提供更优的TCO解决方案。此外,美光已经开始准备12-high的36GB版本,并计划于2024年第一季度送样。

至于HBM的价格问题,鉴于目前主流芯片用的还是HBM2和HBM2e,且出货量仍在增加,所以短期内不会有太大的波动。不过,TrendForce预计随着HBM3的推出,以及H100等基于HBM3设计的AI芯片逐渐面世,老一代HBM内存的价格应该会有所下跌,让位给ASP价格更高但性价比依然有所提升的HBM3。

小结

尽管HBM以及后续迭代的版本解决了当下AI计算的内存墙问题,但内存厂商们考虑到传统内存最近的库存情况,明显对于满足客户需求、扩大市场份额以及避免产能过剩有了新的权衡,在产能扩张的决策上也会更加谨慎。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI大算力的存储技术, HBM 4E转向定制化

    电子发烧友网报道(文/黄晶晶)如今英伟达GPU迭代速度加快至每年一次,HBM存储速率如何跟上GPU发展节奏。越来越多的超大规模云厂商、GPU厂商开始转向定制化HBM。而
    的头像 发表于 11-30 00:31 4995次阅读
    AI大算力的存储技术, <b class='flag-5'>HBM</b> 4E转向定制化

    性能优于HBM,超高带宽内存 (X-HBM) 架构来了!

    电子发烧友网综合报道,NEO Semiconductor宣布推出全球首款用于AI芯片的超高带宽内存 (X-HBM) 架构。该架构旨在满足生成式AI和高性能计算日益增长的需求,其32Kbit数据总线
    的头像 发表于 08-16 07:51 4546次阅读
    性能优于<b class='flag-5'>HBM</b>,超高带宽<b class='flag-5'>内存</b> (X-<b class='flag-5'>HBM</b>) 架构来了!

    光伏气象监测系统:为光伏电站 “把脉” 的智慧管家

    光伏气象监测系统:为光伏电站 “把脉” 的智慧管家 柏峰【BF-GFQX】在全球能源转型的浪潮中,光伏发电凭借清洁、可再生的优势,成为能源领域的 “新宠儿”。然而,光伏电站的发电效率却像个 “娇气的孩子”
    的头像 发表于 07-28 10:27 353次阅读
    光伏气象监测系统:为光伏电站 “把脉” 的智慧管家

    想搞定控制器连接?耐达讯Modbus转Profinet这招你知道吗?

    的“新宠儿”,高速高效却兼容性有限。当需要把Modbus设备连接到支持Profinet的控制器时,这可就成了不少人的“噩梦关卡”。 别急,耐达讯自动化Modbus转Profinet网关解决方案闪亮登场,堪称
    发表于 07-25 15:41

    美光12层堆叠36GB HBM4内存已向主要客户出货

    随着数据中心对AI训练与推理工作负载需求的持续增长,高性能内存的重要性达到历史新高。Micron Technology Inc.(美光科技股份有限公司,纳斯达克股票代码:MU)宣布已向多家主要客户送样其12层堆叠36GB HBM4内存
    的头像 发表于 06-18 09:41 1167次阅读

    Cadence推出HBM4 12.8Gbps IP内存系统解决方案

    近日,Cadence(NASDAQ:CDNS)近日宣布推出业界速度最快的 HBM4 12.8Gbps 内存 IP 解决方案,以满足新一代 AI 训练和 HPC 硬件系统对 SoC 日益增长的内存带宽
    的头像 发表于 05-26 10:45 1184次阅读

    比肩HBM,SOCAMM内存模组即将商业化

    参数规模达数百亿甚至万亿级别,带来巨大内存需求,但HBM内存价格高昂,只应用在高端算力卡上。SOCAMM则有望应用于AI服务器、高性能计算、AI PC以及其他如游戏、图形设计、虚拟现实等领域。   SOCAMM利用高I/O密度和
    的头像 发表于 05-17 01:15 3561次阅读

    石油机械新宠儿 旋转式油管测径仪

    关键字:旋转式油管测径仪,旋转式测径仪,油管测径仪,输油管道测径仪,输油管测量设备,输油管测量,石油机械测径仪 旋转式油管测径仪作为石油机械领域的新宠儿,其在石油管道生产、质量检测及油气传输效率
    发表于 03-31 14:11

    HBM技术的优势和应用场景

    近年来随着人工智能浪潮的兴起,数据中心和服务器市场对于内存性能的要求达到了前所未有的高度。HBM(高带宽内存)凭借其卓越的性能优势,如高带宽、低功耗、高集成度和灵活的架构,成为了这一领域的“香饽饽”,炙手可热。
    的头像 发表于 03-25 17:26 4556次阅读
    <b class='flag-5'>HBM</b>技术的优势和应用场景

    HBM新技术,横空出世:引领内存芯片创新的新篇章

    在这样的背景下,高带宽存储器(HBM)技术应运而生,以其独特的3D堆叠架构和TSV(硅通孔)技术,为内存芯片行业带来了前所未有的创新。
    的头像 发表于 03-22 10:14 3141次阅读
    <b class='flag-5'>HBM</b>新技术,横空出世:引领<b class='flag-5'>内存</b>芯片创新的新篇章

    三星电子将供应改良版HBM3E芯片

    三星电子在近期举行的业绩电话会议中,透露了其高带宽内存HBM)的最新发展动态。据悉,该公司的第五代HBM3E产品已在2024年第三季度实现大规模生产和销售,并在第四季度成功向多家GPU厂商
    的头像 发表于 02-06 17:59 1022次阅读

    美光加入16-Hi HBM3E内存竞争

    近日,全球DRAM内存巨头之一的美光科技公司宣布,将正式进军16-Hi(即16层堆叠)HBM3E内存市场。目前,美光正在对最终设备进行评估,并计划在今年内实现量产。 这一消息标志着美光在高性能
    的头像 发表于 01-17 14:14 860次阅读

    美光新加坡HBM内存封装工厂破土动工

    近日,全球领先的HBM内存制造商之一——美光宣布,其位于新加坡的HBM内存先进封装工厂项目已于当地时间今日正式破土动工。这座工厂预计将于2026年正式投入运营,成为新加坡当地的首家此类
    的头像 发表于 01-09 16:02 1087次阅读

    SK海力士加速16Hi HBM3E内存量产准备

    近日,SK海力士正全力加速其全球首创的16层堆叠(16Hi)HBM3E内存的量产准备工作。这一创新产品的全面生产测试已经正式启动,为明年初的样品出样乃至2025年上半年的大规模量产与供应奠定了
    的头像 发表于 12-26 14:46 976次阅读

    美光发布HBM4与HBM4E项目新进展

    近日,据报道,全球知名半导体公司美光科技发布了其HBM4(High Bandwidth Memory 4,第四代高带宽内存)和HBM4E项目的最新研发进展。 据悉,美光科技的下一代HBM
    的头像 发表于 12-23 14:20 1291次阅读