0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

赋能AI系统:内存创新助力释放AI 2.0的强大潜力

工程师 来源:厂商供稿 2025-09-12 16:58 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

作者:Rambus研究员与杰出发明家Steven Woo

根据IDC预测,中国在人工智能领域的投资预计到2027年将达到381亿美元,占全球总投资的近9%。作为全球人工智能的重要参与者,中国正加速在汽车、通信、医疗、金融等多个行业应用和发展生成式AI技术,全面迈入“AI 2.0”时代。

人工智能这一概念是由约翰·麦卡锡(John McCarthy)在1956年提出。此后数十年间,科学家们投入了巨大努力,让AI不断变得更智能,但其能力仍主要局限于在特定输入输出范围内进行分析与预测(例如:从文本生成网页结果)。而新一代人工智能则带来了重大范式转变——它能够基于数据生成全新的内容。

和上一代不同,AI 2.0 依托多模态输入与输出,在文本、语音、代码、图像、视频,甚至三维模型等多种媒介之间实现无缝交互。大型语言模型(LLMs)的出现,也是这一时代的重要标志。LLMs能够处理和生成海量数据,正在不断突破以往的技术边界,让更复杂、更先进的AI应用在各行各业成为可能。

训练大型语言模型(LLMs)是一个复杂的多步骤过程,首先需要收集用于训练的数据。数据收集完成后,还需经过分析、处理和清理,才能进入训练阶段。如何实现海量数据的高速传输与存储,已经成为整个行业面临的重大挑战,更不用说训练所需的数据规模还在持续增长。以ChatGPT为例,GPT-3的参数量为1750亿,而GPT-4则高达1.76万亿,几乎所有AI公司都在不断扩大模型的训练参数。

在完成训练过程后,AI模型便会生成,并可用于执行推理。相比训练,推理对内存的要求相对较低。然而,随着AI逐渐普及,越来越多的应用正从数据中心向边缘和终端延伸,这对现有的内存系统在带宽、延迟和容量等方面提出了更高的要求。

为应对这些重大挑战并解决 AI 2.0 的内存瓶颈,业界已提出了许多创新性技术方案,包括多路复用内存、串行连接内存、新型编码方案以及全新的模块形态。这些创新有望应用于现有内存解决方案,为先进的 AI 工作负载带来更高的性能表现。

其中一个前景广阔的解决方案是多路复用内存。正在进入市场的 DDR5 MRDIMMs 采用复用技术,在沿用现有 DRAM 的同时,有效地将数据传输速率提升一倍,从而突破了传统 DRAM 在扩展上的限制。另一种提升路径是串行连接内存。在 CXL 技术的支持下,这一方式能够实现缓存一致性的内存共享,并通过采用串行而非并行的数据传输,大幅提升容量与带宽。

此外,新型编码方案也可应用于部分内存模块。例如,GDDR7 采用三阶脉冲幅度调制(PAM3)编码,数据传输速率最高可达 48Gbps,能够支持高性能的边缘与终端 AI 应用。模块形态的创新同样在内存容量扩展中发挥关键作用。低功耗压缩附加内存模块(LPCAMM)便是其中的典型代表,其专为在空间受限的设备(如笔记本电脑)中扩展 LPDDR 内存的性能与应用而设计。

除了性能和容量的提升之外,RAS(可靠性、可用性和可维护性)在内存领域也变得愈发重要。随着内存芯片的数据传输速率不断提高,单元尺寸持续缩小,以便在一颗芯片中容纳更多比特。但单元缩小也带来了新的挑战,例如芯片内错误(on-die errors),这就需要更强大的纠错机制。此外,像 RowHammer 和 RowPress 这样的现象——即访问特定单元时可能干扰相邻区域的单元——也亟需进一步的缓解策略。

还需要关注一些相关的发展。量子计算时代即将到来,现有的非对称加密将面临被破解的风险,因此无论是 AI 数据还是硬件,都需要通过新一代的抗量子加密技术(Quantum Safe Cryptography)来保护。

同时,训练和推理AI所需的能耗问题也正日益受到关注。对此,业内各方正积极采取行动来应对这一挑战。从内存角度来看,行业正持续通过降低工作电压和优化设计架构来提升能效。电源管理IC(PMIC)将成为在既定功耗范围内实现更高性能的关键一环。

随着 AI 模型日益复杂,对内存的需求也将更加严苛。AI 2.0将重塑各行各业,从个性化体验到行业专属解决方案,在整个计算领域(云端、边缘、终端)全面掀起浪潮,进而推动对更高性能内存解决方案的强劲需求。

作为业内领先的芯片与半导体IP供应商,Rambus 致力于推动数据中心互联,解决内存与处理器之间的瓶颈问题,从而支持大型语言模型(LLMs)及先进AI应用的发展。Rambus 的全方位产品组合——包括 DDR5 DIMM 芯片组、HBM3/3E 控制器 IP、GDDR7、PCIe 6.1、CXL 3.1,以及 LPDDR5T/5X/5 等——为这些高负载的 AI 工作提供所需的速度、容量与连接能力。

在 AI 2.0 的演进过程中,Rambus 在内存接口芯片、内存接口 IP 以及安全 IP 解决方案方面的专长,将成为不断突破技术边界的重要推动力。展望未来,Rambus 将持续携手产业伙伴,共同开发前沿的内存解决方案,释放 AI 技术的全部潜能。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 内存
    +关注

    关注

    9

    文章

    3173

    浏览量

    76120
  • Rambus
    +关注

    关注

    0

    文章

    66

    浏览量

    19281
  • AI
    AI
    +关注

    关注

    89

    文章

    38161

    浏览量

    296840
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI6G与卫星通信:开启智能天网新时代

    医疗、智能交通等创新应用。而在偏远地区和海洋上,AI的卫星通信将为数亿人提供互联网接入,缩小数字鸿沟。 正如我们从4G到5G的跨越一样,AI
    发表于 10-11 16:01

    BPI-AIM7 RK3588 AI与 Nvidia Jetson Nano 生态系统兼容的低功耗 AI 模块

    ,全面升级为 PCIe、HDMI 和 DP 全面支持多种主流操作系统,包括但不限于Debian、Ubuntu、Armbian 释放NPU潜力 使用 AIM-IO 扩展板,您可以快速实现高级应用程序。以下
    发表于 10-11 09:08

    爱立信展示AI5G的创新成果

    近日,在波士顿举行的一场专属活动中,爱立信重点展示了AI的5G创新成果、任务关键型网络,以及驱动企业变革的全球API合作与解决方案。
    的头像 发表于 09-24 14:05 7624次阅读

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片到AGI芯片

    、现阶段更智能、更接近AGI的6中算法与模型 1、MoE模型 MoE模型作为Transfomer模型的后继者,代表着AI技术的一项重大创新和发展。 优势: 在于处理庞大的参数规模,显著减少
    发表于 09-18 15:31

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片的需求和挑战

    ②Transformer引擎③NVLink Switch系统④机密计算⑤HBM FPGA: 架构的主要特点:可重构逻辑和路由,可以快速实现各种不同形式的神经网络加速。 ASIC: 介绍了几种ASIC AI芯片
    发表于 09-12 16:07

    睿海光电领航AI光模块:超快交付与全场景兼容智算时代——以创新实力助力全球客户构建高效算力底座

    ,智能制造敏捷响应 在交付能力上,睿海光电展现了超越同行的“深圳速度”。其位于深圳的3120+平方米智能制造基地配备全自动化生产线与数字化管理系统,支持高速光模块(含液冷)、有源光缆等产品的OEM
    发表于 08-13 19:03

    【书籍评测活动NO.64】AI芯片,从过去走向未来:《AI芯片:科技探索与AGI愿景》

    科学家”的构想富有颠覆性,通过自动化科学发现框架,AI自主生成假说、设计实验、分析结果,将传统 “小作坊式” 科研升级为 “批量生产式” 创新。 书中展望,这类系统有望催生诺贝尔奖
    发表于 07-28 13:54

    SAP与亚马逊云科技推出AI联合创新计划,打造生成式AI解决方案,助力客户应对市场波动与供应链复杂性

    企业认识到生成式AI具有变革业务的潜力,却苦于无从入手。通过将先进的生成式AI技术与核心系统中的企业资源规划(ERP)数据相结合,企业能够释放
    的头像 发表于 05-26 16:54 438次阅读

    SAP与亚马逊云科技推出AI联合创新计划,打造生成式AI解决方案, 助力客户应对市场波动与供应链复杂性

    认识到生成式AI具有变革业务的潜力,却苦于无从入手。通过将先进的生成式AI技术与核心系统中的企业资源规划(ERP)数据相结合,企业能够释放
    发表于 05-26 11:44 1100次阅读

    首创开源架构,天玑AI开发套件让端侧AI模型接入得心应手

    的自有模型移植,使首字词生态速度比云端方案提升70%,绝影多模态智能座舱强大的端侧运行能力,让汽车拥有“有趣的灵魂”。 不仅如此,天玑AI开发套件已经接入NVIDIA TAO生态
    发表于 04-13 19:52

    Banana Pi 发布 BPI-AI2N & BPI-AI2N Carrier,助力 AI 计算与嵌入式开发

    助力 AI、智能制造和物联网行业的发展。未来,Banana Pi 将继续深化与Renesas的技术合作,推动更多高性能嵌入式解决方案的落地。 ” BPI-AI2N开发板
    发表于 03-19 17:54

    Banana Pi 与瑞萨电子携手共同推动开源创新:BPI-AI2N

    技术、嵌入式系统和物联网等领域展开深度合作,为全球开发者和企业用户提供更强大的解决方案。 Banana Pi 长期以来致力于推动开源硬件的发展,凭借丰富的产品线和强大的社区支持,成为开发者和行业用户
    发表于 03-12 09:43

    AI边缘网关:开启智能时代的新蓝海

    功耗的AI边缘计算平台;对于算法企业,要研发更轻量化、更精准的边缘AI模型;对于系统集成商,则要构建完整的边缘智能解决方案。这个万亿级的新市场,正在等待更多创新者的加入。 在这场
    发表于 02-15 11:41

    虹软AI视觉雷鸟V3 AI拍摄眼镜发布

    技术,支持拍照、视频录制、开放式耳机等多种实用功能。作为雷鸟V3整体视觉系统的技术方,虹软充分融合计算摄影与AI技术,为雷鸟V3的影像与AI
    的头像 发表于 01-08 10:58 2277次阅读