0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

新一轮AI竞赛中,为什么HPC一定是赢家?

新思科技 来源:未知 2023-03-23 06:35 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

本文转自《TechSugar》感谢《TechSugar》对新思科技的关注

当前,以ChatGPT为代表的生成式人工智能应用风头无两,正在全球科技巨头间掀起新一轮的技术竞赛。在很多人看来,ChatGPT的上线或可被视作一次新产业革命的引爆点,而这个引爆点之所以能出现,则离不开背后的高性能计算与大数据基础设施。

ChatGPT基于Open AI公司的GPT-3系列语言大模型来实现,GPT(Generative Pre-trained Transformer)即生成式预训练转换模型,是一种基于互联网可用数据训练的文本生成深度学习模型。

为了实现和人类可比拟的语言交互和语言组织能力,GPT-3的参数达到1750亿个,相比之下,2018年推出的GPT-1,参数为1.17亿个,而2019年推出的GPT-2参数则达到15亿个,量变最终将引发质变,参数规模的飞速膨胀,对支撑GPT运行的硬件系统提出了越来越高的要求,对于类似GPT这样的大模型,没有高性能硬件支撑,根本无法去实现与部署,更不要说随着新数据的涌入来迭代了。

所以,在众厂商纷纷宣布加码大模型AI投入时,有人断言,新一轮AI竞赛鹿死谁手还很难说,但高性能计算(HPC)系统中的高算力芯片、高带宽互连芯片和存储芯片一定是赢家。

HPC及其核心

芯片发展趋势

那么,高性能计算要如何发展才能更好地支持新一波人工智能发展浪潮?而人工智能将如何影响到高性能计算本身呢?有如下几点,可供探讨。

第一,高性能计算与人工智能相得益彰。人工智能的每一次高速发展,都离不开背后硬件基础设施的支持,而高速发展的AI又对硬件基础设施提出了更高的要求,激励芯片或系统性能成倍上升。

在Open AI 2018年发布的报告中,对自2012至2018年人工智能训练对算力的需求超过30万倍,算力需求平均每3.5个月翻一番,这给芯片及硬件系统更新换代带来极大压力,因为按摩尔定律的性能升级速度,已经不能满足AI训练对芯片性能的需求增长速度了。

为了打破性能瓶颈,新思科技提出了SysMoore开发方法学,通过全系统优化,有效释放了性能提升潜力。

反过来,AI能力也在提升芯片开发效率,帮助开发者设计出性能更出色的芯片。例如,通过应用新思科技的DSO.ai工具,开发者将一款HPC处理器的运行频率提高了100Mz,而开发时间缩短了一半,整个团队的产出效率提升至原来的三倍。

bf7b3c4c-c901-11ed-bfe3-dac502259ad0.png

第二,HPC芯片性能提升方式从平面扩展转变为立体增长。多晶片系统(Multi-Die System)正在成为HPC芯片的主要发展潮流,从HPC的系统角度来看,采用先进封装技术将不同芯片封装在一起的方式,比PCB互连能大幅提升系统性能,因而HPC芯片在实现上,2.5D封装与3D封装的设计将越来越多。

而由于成熟的接口IP可以直接以芯粒(Chiplet)方式与计算内核进行拼接,多晶片系统开发方式还可以有效保证良率,加快开发效率。

多晶片系统的实现,需要设计方法学的更新,以实现高带宽、低延迟、低功耗和无差错工作的片间接口,多晶片系统的片间接口技术对于数据中心与边缘设备的快速、可靠的数据传输至关重要。

采用先进封装技术将芯片进行立体堆叠,为芯片性能提升打开了无限可能,但也需要更强的EDA工具、设计方法学和IP,来处理多晶片系统中的异构集成、互连和封装问题。此外,随着数据中心互连技术的发展,开发者还需要具备硅光学等领域的专业知识和技术。

新思科技的3DIC Compiler是一个高效易用的多晶片系统设计实现平台,可以为各种不同工艺制造的芯粒拼接堆叠提供完整的开发环境。

例如,从多晶片系统项目启动时,开发者就需要用3DIC Compiler对多晶片系统进行功能划分,将整体设计分解为多个芯粒,接下来,可以用3DIC Compiler进行早期版图规划和基于封装的信号完整性分析,以实现更好的片间连接性能和更优的功耗表现。

bfcd9d2a-c901-11ed-bfe3-dac502259ad0.jpg

第三,边缘计算设备将不断进步迭代。人工智能的训练发生在数据中心,但推理或数据收集都离不开边缘设备。

在人工智能应用中,对边缘设备的延迟要求越来越高,希望能进一步减少边缘设备数据处理和传输延迟,这就要求优化边缘设备主芯片的数据传输速度和效率。而边缘设备数量众多,因而在芯片层面能够降低功耗的话,将对整个云加边缘体系的节能降耗贡献极大。

所以,边缘端芯片需要强大的仿真和验证工具、功耗和热分析功能、设计布局的智能实施,以及一系列关键功能和接口的认证IP模块,新思科技可以为开发者提供从边缘到云端可应用的基础IP、接口IP、安全IP和处理器IP,优化实现高性能、低延迟和低功耗,同时支持先进的工艺技术。

第四,从信息安全、可靠性和运营成本等考虑,HPC芯片需要全生命周期管理。HPC系统规模巨大,运营成本高昂,可以处理PB乃至ZB级别的数据,可以实时运行大模型。这种级别的系统一旦出现故障,由于业务暂停造成的经济损失,数字会十分惊人。

所以,一个好的HPC系统,应该具备卓越的可靠性、可用性和服务能力,而要做到这一点,系统角度可以通过冗余设计来增加可靠性,但更重要的则是从芯片层级来减少故障率。

在芯片层级减少系统的故障率,就需要用到新思科技的硅生命周期管理(Silicon Lifecycle Management,SLM )的理念。

SLM通过内置IP来收集芯片运行中的各种参数,并将芯片运行数据传输至指定位置进行分析和跟踪,从而让系统可以实时监控各个核心芯片的运行状况,为系统建立起芯片健康状况跟踪图,从而更好地预测和预防故障的发生,最终实现故障率降低和最小化故障损失。

第五,可持续发展是HPC产业长期繁荣的基础。由于规模巨大,HPC系统能耗惊人,专家预测,到2030年,仅数据中心用电量将占到全球总用电量的3%至7%,不少区域甚至抵制建设数据中心,以免因其耗能巨大而导致当地环境恶化。所以,如何有效解决HPC/数据中心能耗和散热问题,已经成为其能否可持续发展的关键。

在新思科技为HPC/数据中心提供的完整解决方案中,处处体现了节能降耗的理念。例如,通过低功耗设计方法学和功耗优化过的IP核来实现HPC芯片的整体功耗优化,从而降低HPC系统能耗,有效降低系统功耗,而新思科技各种高效率开发、仿真和验证工具,大幅降低了研发一款芯片的总体用时和资源占用,则是从更广泛角度上为可持续发展做出的贡献。

总结

随着互联网与人工智能技术的发展,HPC产业的重要性与日俱增,大数据与大数据模型的应用,都对HPC系统的性能与能耗提出了更高要求,只有从芯片层级出发来对HPC系统进行优化,才能真正让HPC系统性能不断升级,能效持续优化,走上真正的可持续发展之路。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 新思科技
    +关注

    关注

    5

    文章

    989

    浏览量

    53018

原文标题:新一轮AI竞赛中,为什么HPC一定是赢家?

文章出处:【微信号:Synopsys_CN,微信公众号:新思科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AD7124多通道连续读取一轮数据之后,与下一轮存在80ms时间差,为什么?

    AD7124-8配置:初始化5个通道,使用SinC3的快速建立滤波器,FS设置为3,使能连续读取,全功率模式,使用内部614.4kHz时钟源,通过DOUT脚触发外部中断进行数据读取 现象:读取一轮5
    发表于 05-07 08:10

    红杉&小米联合投资的宁波传感器公司,再获新一轮融资,填补国产空白!

      近日,国产工业传感器公司宁波新算技术有限公司(下文简称“新算技术”),官宣获得新一轮A融资,本轮融资投资方为杭州华方资本、宁波创投引导基金、Evergreen Dynamics1 HK
    的头像 发表于 05-06 21:33 408次阅读
    红杉&amp;小米联合投资的宁波传感器公司,再获<b class='flag-5'>新一轮</b>融资,填补国产空白!

    普渡机器人完成近10亿元新一轮融资

    近日,全球商用服务机器人领军企业普渡机器人完成近10亿元新一轮融资,本轮融资由龙岗金控、亚投资本联合领投,北汽产投、蓝思科技、弘晖基金、珠三角与长三角等多地政府引导基金及知名硬科技投资机构共同参与。
    的头像 发表于 04-27 16:40 1176次阅读

    自研算/存/电/连,AI算力芯片黑马宣布完成新一轮融资

    电子发烧友网报道(文/李弯弯)近日,AI算力芯片领域的创新企业图灵进化(TuringEvo)宣布完成新一轮数千万级别的融资。这笔资金将主要用于核心产品量产、研发团队扩充以及全球市场拓展,为图灵进化
    的头像 发表于 04-15 15:29 5419次阅读
    自研算/存/电/连,<b class='flag-5'>AI</b>算力芯片黑马宣布完成<b class='flag-5'>新一轮</b>融资

    深兰科技国际业务迎来新一轮布局推进

    在人工智能加速进入实体产业深水区的背景下,深兰科技国际业务迎来新一轮布局推进。北欧市场授权体系正式确立,工程设备样机进入海外验证阶段,非洲医疗板块实现突破性对接,全球业务结构持续向纵深拓展。
    的头像 发表于 03-04 15:12 627次阅读

    星融元完成新一轮融资,携手产业资本加速AI网络市场布局

    星融元完成新一轮融资,由厦门联合、湖南财信共同投资。公司作为AI网络架构领先者,构建“云网融合、开放解耦”技术体系,提供全栈网络解决方案。其AI Fabric高性能网络已支持头部客户千卡至万卡级
    的头像 发表于 01-23 16:10 1324次阅读
    星融元完成<b class='flag-5'>新一轮</b>融资,携手产业资本加速<b class='flag-5'>AI</b>网络市场布局

    智行者科技完成新一轮4亿元人民币融资

    近日,智行者完成新一轮4亿元人民币融资,投资方为黄石市国有资本投资集团有限公司管理的黄石市产业发展基金。智行者此次获得国内AAA主体信用评级国有资本加持,充分体现了市场对其特种无人驾驶全栈技术
    的头像 发表于 01-07 17:44 817次阅读

    上海泰矽微宣布完成新一轮近亿元融资

      融资资讯 PART ONE 近日,国内领先的车规SoC芯片厂商——上海泰矽微(Tinychip Micro)(以下简称“泰矽微”)宣布完成新一轮近亿元人民币融资。本轮融资由湖北科投长江创业投资
    的头像 发表于 12-30 09:39 870次阅读
    上海泰矽微宣布完成<b class='flag-5'>新一轮</b>近亿元融资

    汽车芯片企业芯必达完成新一轮融资

    近日,武汉芯必达微电子有限公司(以下简称“芯必达”)宣布完成新一轮融资。本轮融资由张江高科领投,老股东新微资本持续跟投。此次融资的顺利完成,不仅为芯必达在智能汽车芯片赛道的深耕注入了强劲资本动力,更标志着行业资本对公司技术实力与商业化潜力的高度认可。
    的头像 发表于 12-25 15:34 725次阅读

    联盛德微电子获得新一轮数千万元战略投资

    国内领先的物联网无线通信芯片及解决方案提供商——北京联盛德微电子有限责任公司(以下简称“联盛德微电子”)今日正式宣布,成功获得龙芯创投领投、海越创投跟投的新一轮数千万元战略投资。本轮融资不仅是市场
    的头像 发表于 12-19 16:40 992次阅读

    上扬软件与晶睿电子启动新一轮深度合作项目

    近日,上扬软件与浙江晶睿电子科技有限公司(简称“晶睿电子”)在前期成功合作的基础上,正式启动新一轮深度合作项目。本次合作,上扬软件将为晶睿电子Si外延厂(以下简称“厂”)提供原有MES系统替换
    的头像 发表于 12-01 15:55 518次阅读

    苏州传感器芯片IDM厂商“矩阵光电”获新一轮融资

    近日,苏州矩阵光电有限公司(下文简称“矩阵光电”),获得最新一轮融资,由张家港产投独家投资。   矩阵光电成立于2012年9月,是家III-V族化合物半导体通讯及传感芯片研发制造商,公司产品主要有
    的头像 发表于 11-21 22:51 2767次阅读
    苏州传感器芯片IDM厂商“矩阵光电”获<b class='flag-5'>新一轮</b>融资

    商汤医疗完成数亿元新一轮战略融资

    近日,商汤医疗完成数亿元新一轮战略融资,本轮投资方包括联想创投、联创资本、九弦资本、申冉投资等多家知名投资机构。这融资进展印证了市场对商汤医疗领先技术实力、成熟商业模式及价值增长潜力的高度认可。
    的头像 发表于 11-19 17:43 5814次阅读

    亿铸科技完成新一轮融资

    近日,亿铸科技完成新一轮融资。本次融资由兴湘资本、农银国际、盈科值得、合鼎共资本共同参与。此次融资的完成,标志着亿铸科技在AI大算力芯片领域的创新实力再获重要认可。
    的头像 发表于 10-31 17:06 1172次阅读