0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

赋能AI系统:内存创新助力释放AI 2.0的强大潜力

工程师 来源:厂商供稿 2025-09-12 16:58 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

作者:Rambus研究员与杰出发明家Steven Woo

根据IDC预测,中国在人工智能领域的投资预计到2027年将达到381亿美元,占全球总投资的近9%。作为全球人工智能的重要参与者,中国正加速在汽车、通信、医疗、金融等多个行业应用和发展生成式AI技术,全面迈入“AI 2.0”时代。

人工智能这一概念是由约翰·麦卡锡(John McCarthy)在1956年提出。此后数十年间,科学家们投入了巨大努力,让AI不断变得更智能,但其能力仍主要局限于在特定输入输出范围内进行分析与预测(例如:从文本生成网页结果)。而新一代人工智能则带来了重大范式转变——它能够基于数据生成全新的内容。

和上一代不同,AI 2.0 依托多模态输入与输出,在文本、语音、代码、图像、视频,甚至三维模型等多种媒介之间实现无缝交互。大型语言模型(LLMs)的出现,也是这一时代的重要标志。LLMs能够处理和生成海量数据,正在不断突破以往的技术边界,让更复杂、更先进的AI应用在各行各业成为可能。

训练大型语言模型(LLMs)是一个复杂的多步骤过程,首先需要收集用于训练的数据。数据收集完成后,还需经过分析、处理和清理,才能进入训练阶段。如何实现海量数据的高速传输与存储,已经成为整个行业面临的重大挑战,更不用说训练所需的数据规模还在持续增长。以ChatGPT为例,GPT-3的参数量为1750亿,而GPT-4则高达1.76万亿,几乎所有AI公司都在不断扩大模型的训练参数。

在完成训练过程后,AI模型便会生成,并可用于执行推理。相比训练,推理对内存的要求相对较低。然而,随着AI逐渐普及,越来越多的应用正从数据中心向边缘和终端延伸,这对现有的内存系统在带宽、延迟和容量等方面提出了更高的要求。

为应对这些重大挑战并解决 AI 2.0 的内存瓶颈,业界已提出了许多创新性技术方案,包括多路复用内存、串行连接内存、新型编码方案以及全新的模块形态。这些创新有望应用于现有内存解决方案,为先进的 AI 工作负载带来更高的性能表现。

其中一个前景广阔的解决方案是多路复用内存。正在进入市场的 DDR5 MRDIMMs 采用复用技术,在沿用现有 DRAM 的同时,有效地将数据传输速率提升一倍,从而突破了传统 DRAM 在扩展上的限制。另一种提升路径是串行连接内存。在 CXL 技术的支持下,这一方式能够实现缓存一致性的内存共享,并通过采用串行而非并行的数据传输,大幅提升容量与带宽。

此外,新型编码方案也可应用于部分内存模块。例如,GDDR7 采用三阶脉冲幅度调制(PAM3)编码,数据传输速率最高可达 48Gbps,能够支持高性能的边缘与终端 AI 应用。模块形态的创新同样在内存容量扩展中发挥关键作用。低功耗压缩附加内存模块(LPCAMM)便是其中的典型代表,其专为在空间受限的设备(如笔记本电脑)中扩展 LPDDR 内存的性能与应用而设计。

除了性能和容量的提升之外,RAS(可靠性、可用性和可维护性)在内存领域也变得愈发重要。随着内存芯片的数据传输速率不断提高,单元尺寸持续缩小,以便在一颗芯片中容纳更多比特。但单元缩小也带来了新的挑战,例如芯片内错误(on-die errors),这就需要更强大的纠错机制。此外,像 RowHammer 和 RowPress 这样的现象——即访问特定单元时可能干扰相邻区域的单元——也亟需进一步的缓解策略。

还需要关注一些相关的发展。量子计算时代即将到来,现有的非对称加密将面临被破解的风险,因此无论是 AI 数据还是硬件,都需要通过新一代的抗量子加密技术(Quantum Safe Cryptography)来保护。

同时,训练和推理AI所需的能耗问题也正日益受到关注。对此,业内各方正积极采取行动来应对这一挑战。从内存角度来看,行业正持续通过降低工作电压和优化设计架构来提升能效。电源管理IC(PMIC)将成为在既定功耗范围内实现更高性能的关键一环。

随着 AI 模型日益复杂,对内存的需求也将更加严苛。AI 2.0将重塑各行各业,从个性化体验到行业专属解决方案,在整个计算领域(云端、边缘、终端)全面掀起浪潮,进而推动对更高性能内存解决方案的强劲需求。

作为业内领先的芯片与半导体IP供应商,Rambus 致力于推动数据中心互联,解决内存与处理器之间的瓶颈问题,从而支持大型语言模型(LLMs)及先进AI应用的发展。Rambus 的全方位产品组合——包括 DDR5 DIMM 芯片组、HBM3/3E 控制器 IP、GDDR7、PCIe 6.1、CXL 3.1,以及 LPDDR5T/5X/5 等——为这些高负载的 AI 工作提供所需的速度、容量与连接能力。

在 AI 2.0 的演进过程中,Rambus 在内存接口芯片、内存接口 IP 以及安全 IP 解决方案方面的专长,将成为不断突破技术边界的重要推动力。展望未来,Rambus 将持续携手产业伙伴,共同开发前沿的内存解决方案,释放 AI 技术的全部潜能。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 内存
    +关注

    关注

    9

    文章

    3266

    浏览量

    76630
  • Rambus
    +关注

    关注

    0

    文章

    72

    浏览量

    19367
  • AI
    AI
    +关注

    关注

    91

    文章

    42408

    浏览量

    303364
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    直播预告|玄铁 x Canonical:从本地推理到 AI 工厂,基于 RISC-V 的 AI 基础设施创新路径探讨

    剖析玄铁自研张量计算引擎的架构设计思想,解读其如何以通用指令集的灵活性,逼近专用加速器的效表现,为高性能 RISC-V 注入原生 AI 算力基因。 开源系统蓝图|Canonical:From
    发表于 05-15 12:15

    德明利推出CKD DDR5内存条 为AI PC提供稳定高频内存解决方案

    德明利推出CKD DDR5内存条,为AI PC提供稳定高频内存解决方案 (高频带宽释放性能潜力
    的头像 发表于 04-03 11:23 2312次阅读
    德明利推出CKD DDR5<b class='flag-5'>内存</b>条 为<b class='flag-5'>AI</b> PC提供稳定高频<b class='flag-5'>内存</b>解决方案

    第二代AMD VERSAL AI EDGE系列全面汽车ADAS系统

    选择 AMD 自适应 SoC 和 FPGA 第二代 AMD Versal AI Edge 系列自适应 SoC 带来一种高性能单芯片解决方案,为自动驾驶助力。该系列器件配备用于 IS
    的头像 发表于 03-27 16:30 1091次阅读
    第二代AMD VERSAL <b class='flag-5'>AI</b> EDGE系列全面<b class='flag-5'>赋</b><b class='flag-5'>能</b>汽车ADAS<b class='flag-5'>系统</b>

    AI无处不在 紫光展锐携AI+5G解决方案亮相AWE 2026

    紫光展锐携多款芯片解决方案及系列消费电子终端产品亮相,全面展示AI+5G创新产品应用矩阵,AI无处不在。
    的头像 发表于 03-17 01:56 461次阅读

    Altair CFD 以技术工程创新?

    的端到端无缝衔接。具备自动网格划分、GPU加速、稳态时间行进等功能,其中几何模型准备效率较传统工具提升80%,稳态仿真可在少于100次迭代中快速收敛,大幅缩短仿真周期。4. AI+便捷交互,降低
    发表于 02-28 14:47

    使用NORDIC AI的好处

    ,时延更低,系统在网络不稳定甚至离线时也继续工作。[Edge AI 概述] 提升隐私与可靠性 原始传感器数据(如运动、生理信号等)可以留在本地,只上传推理结果,有利于隐私与数据安全。 本地决策
    发表于 01-31 23:16

    AI6G与卫星通信:开启智能天网新时代

    医疗、智能交通等创新应用。而在偏远地区和海洋上,AI的卫星通信将为数亿人提供互联网接入,缩小数字鸿沟。 正如我们从4G到5G的跨越一样,AI
    发表于 10-11 16:01

    BPI-AIM7 RK3588 AI与 Nvidia Jetson Nano 生态系统兼容的低功耗 AI 模块

    ,全面升级为 PCIe、HDMI 和 DP 全面支持多种主流操作系统,包括但不限于Debian、Ubuntu、Armbian 释放NPU潜力 使用 AIM-IO 扩展板,您可以快速实现高级应用程序。以下
    发表于 10-11 09:08

    爱立信展示AI5G的创新成果

    近日,在波士顿举行的一场专属活动中,爱立信重点展示了AI的5G创新成果、任务关键型网络,以及驱动企业变革的全球API合作与解决方案。
    的头像 发表于 09-24 14:05 1.4w次阅读

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片到AGI芯片

    、现阶段更智能、更接近AGI的6中算法与模型 1、MoE模型 MoE模型作为Transfomer模型的后继者,代表着AI技术的一项重大创新和发展。 优势: 在于处理庞大的参数规模,显著减少
    发表于 09-18 15:31

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片的需求和挑战

    ②Transformer引擎③NVLink Switch系统④机密计算⑤HBM FPGA: 架构的主要特点:可重构逻辑和路由,可以快速实现各种不同形式的神经网络加速。 ASIC: 介绍了几种ASIC AI芯片
    发表于 09-12 16:07

    AI 芯片浪潮下,职场晋升新契机?

    充分展现个人对行业的贡献。 持续学习助力 AI 芯片与职称双赢 AI 芯片领域知识更新迅速,持续学习是保持竞争力的关键,这一点在职称评审中也得到充分体现。例如,许多地区在职称评审条
    发表于 08-19 08:58

    睿海光电领航AI光模块:超快交付与全场景兼容智算时代——以创新实力助力全球客户构建高效算力底座

    ,智能制造敏捷响应 在交付能力上,睿海光电展现了超越同行的“深圳速度”。其位于深圳的3120+平方米智能制造基地配备全自动化生产线与数字化管理系统,支持高速光模块(含液冷)、有源光缆等产品的OEM
    发表于 08-13 19:03

    【书籍评测活动NO.64】AI芯片,从过去走向未来:《AI芯片:科技探索与AGI愿景》

    科学家”的构想富有颠覆性,通过自动化科学发现框架,AI自主生成假说、设计实验、分析结果,将传统 “小作坊式” 科研升级为 “批量生产式” 创新。 书中展望,这类系统有望催生诺贝尔奖
    发表于 07-28 13:54

    NVIDIA AI技术助力欧洲医疗健康行业发展

    从构建全球规模最大的生物多样性数据库,到打造罕见病研究的 AI 工厂,NVIDIA 的 AI 初创企业生态系统正持续为欧洲医疗健康领域注
    的头像 发表于 06-19 14:40 3601次阅读