0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

国产GPU在AI大模型领域的应用案例一览

Carol Li 来源:电子发烧友网原创 作者:李弯弯 2024-04-01 09:28 次阅读
电子发烧友网报道(文/李弯弯)近一年多时间,随着大模型的发展,GPUAI领域的重要性再次凸显。虽然相比英伟达等国际大厂,国产GPU起步较晚、声势较小。不过近几年,国内不少GPU厂商成长非常快,并且不断推出新品,产品也逐渐在各个领域取得应用,而且在大模型的训练和推理方面,也有所建树。

国产GPU在大模型上的应用进展

电子发烧友此前就统计过目前国内主要的GPU厂商,也介绍了这些厂商主要的产品及产品发布、量产进展情况。可以看到,其实近几年已经有不少产品面世并应用。

如沐曦集成,其N系列用于AI推理的GPU芯片早已量产。去年9月,该公司宣布,其与眸瑞科技联合发布了首个AI模型“贴图超分”技术。该技术依托曦思N系列AI推理GPU首款产品曦思N100的强大算力,结合眸瑞科技丰富的算法库资源和先进的AI超分算法,首次将AI超分成功应用到了3D模型领域。

曦思N100是沐曦面向人工智能推理场景推出的高效能GPU产品,针对AI推理及AI应用场景中大量的视频图像处理任务,提供强大的AI算力和视频/图像编解码功能。据称,目前沐曦已联合合作伙伴打造了多种基于曦思N100 的解决方案,如高密度视频结构化分析解决方案、高并发智能转码解决方案、光电混合异构计算解决方案等,这些方案可广泛应用于城市安防、智慧交通、工业视觉、短视频、云计算和智算中心等多个领域。

再如天数智芯,其提供的算力集群具有支持百亿级参数大模型训练的能力。早前有消息,天数智芯与智源研究院、爱特云翔合作,开展基于自主通用GPU的大模型CodeGen(高效编码)项目,通过中文描述来生成可用的C、JavaPython代码以实现高效编码。

智源研究院负责算法设计、训练框架开发、大模型的训练与调优,天数智芯负责提供天垓100加速卡、构建算力集群及全程技术支持,爱特云翔负责提供算存网基础硬件及智能化运维服务。在天垓100加速卡的算力集群,基于智源研究院70亿参数的Aquila语言基础模型,使用代码数据进行继续训练,稳定运行19天,模型收敛效果符合预期。

近一年多来,随着大模型的发展,国产GPU公司都在朝着大模型领域布局。摩尔线程此前也透露,公司已经可以支持3亿参数量模型的训练,2022年底就提前布局了自然语言模型预训练,自研了MusaBert模型。

还有登临科技,该公司此前也表示,公司首款产品Goldwasser已规模化运用在多家行业知名企业的主营业务中,新一代Goldwasser产品针对基于Transformer的网络和生成式AI类大模型的应用在性能有大幅提升。

国产GPU应用于AI领域的多个方面

除了上述谈到应用案例,国产GPU在AI领域的应用案例还有很多,主要涉及到深度学习、自然语言处理以及计算机视觉等多个方面。

如,在计算机视觉领域,国产GPU被广泛应用于图像识别和目标检测等任务。例如,利用GPU加速的深度学习模型可以大幅提升算法的准确性和实时性,这在安防监控、自动驾驶等实际应用中具有重要的价值。

在自然语言处理方面,国产GPU也在发挥重要作用。通过GPU加速的循环神经网络、Transformer等模型,可以实现高效的机器翻译、文本生成等任务。这对于提升智能客服、智能写作等应用的性能具有关键作用。

国产GPU还在强化学习领域得到了应用。强化学习是AI领域的一个重要分支,其目标是通过与环境的交互来学习策略。GPU加速的价值网络、策略网络等模型可以应用于游戏AI、机器人控制等领域,从而提高智能体的学习效率和性能。

另外值得关注的还有,国产GPU在自动驾驶领域的应用也比较多。自动驾驶系统需要处理大量的传感器数据,包括来自摄像头、雷达、激光雷达等的信息。GPU通过其强大的并行计算能力和高效的内存管理,可以实时处理这些数据,并为自动驾驶系统提供准确的决策依据。

例如,一些国产汽车厂商已经开始在其自动驾驶系统中采用国产GPU。这些GPU不仅用于图像处理和计算机视觉任务,如目标检测、车道线识别等,还用于深度学习模型的推理和决策。通过GPU的加速,自动驾驶系统可以更快地识别交通信号、障碍物以及其他重要信息,从而提高行车安全性。

此外,国产GPU还在自动驾驶的地图构建和定位方面发挥了重要作用。通过利用GPU进行高效的地图数据处理和实时定位计算,自动驾驶系统可以更加准确地感知周围环境,并实现精确的导航和路径规划。

具体来说,百度Apollo、小马智行等自动驾驶技术公司,都在其自动驾驶解决方案中采用了国产GPU。这些解决方案不仅应用于乘用车,还扩展到商用车、物流车等多个领域。

写在最后

从目前的情况来看,国内外GPU厂商都在追逐大模型应用带来的机会。当前无论是大模型训练还是推理,英伟达GPU都占据了绝大部分市场。对于国产厂商来说,为了在大模型方面拥有更多自主权,仍然需要持续在大模型训练方面发力,同时相对大模型训练来说,大模型接下来大面积的部署,对于推理芯片的需要将会很大,这将是一个更容易把握的机会。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • gpu
    gpu
    +关注

    关注

    27

    文章

    4604

    浏览量

    128287
  • AI
    AI
    +关注

    关注

    87

    文章

    29057

    浏览量

    266904
  • 大模型
    +关注

    关注

    2

    文章

    2171

    浏览量

    2092
  • AI大模型
    +关注

    关注

    0

    文章

    283

    浏览量

    240
收藏 人收藏

    评论

    相关推荐

    CPU\GPU引领,国产AI PC进阶

    电子发烧友网报道(文/黄晶晶)当前AI PC已经成为PC产业的下个浪潮,国产CPU、GPU厂商PC市场
    的头像 发表于 09-01 02:15 4760次阅读
    CPU\<b class='flag-5'>GPU</b>引领,<b class='flag-5'>国产</b><b class='flag-5'>AI</b> PC进阶

    AI模型不再依赖英伟达GPU?苹果揭秘自研大模型

    ,获得足够的算力构建自己的计算中心,用于训练不同应用的AI模型AI领域众星捧月也造就了英伟达市值曾突破三万亿美元,并短暂登顶全球第的位
    的头像 发表于 08-05 06:07 3737次阅读
    <b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>不再依赖英伟达<b class='flag-5'>GPU</b>?苹果揭秘自研大<b class='flag-5'>模型</b>

    国产AI出海加速,IT领域投资激增

    随着AI技术的飞速发展,国产AI应用正加速走向世界舞台。据统计,目前已有超过百款国产AI应用成功出海,展现出强大的国际竞争力。同时,
    的头像 发表于 09-25 14:26 171次阅读

    人工智能ai4s试读申请

    目前人工智能在绘画对话等大模型领域应用广阔,ai4s也是方兴未艾。但是如何有效利用ai4s工具助力科研是个需要研究的课题,本书对ai4s基本原理和原则,方法进行描诉,有利于总结经验,拟
    发表于 09-09 15:36

    模型发展下,国产GPU的机会和挑战

    电子发烧友网站提供《大模型发展下,国产GPU的机会和挑战.pdf》资料免费下载
    发表于 07-18 15:44 6次下载
    大<b class='flag-5'>模型</b>发展下,<b class='flag-5'>国产</b><b class='flag-5'>GPU</b>的机会和挑战

    摩尔线程与智谱AI完成大模型性能测试与适配

    近日,摩尔线程与智谱AI人工智能领域开展了轮深入的合作,共同对GPU模型进行了适配及性能测
    的头像 发表于 06-14 16:40 819次阅读

    摩尔线程与无问芯穹国产GPU上首次实现大模型实训

    近日,摩尔线程与无问芯穹共同宣布,双方已正式完成基于国产全功能GPU千卡集群的3B规模大模型实训。这款名为“MT-infini-3B”的模型
    的头像 发表于 05-27 10:59 566次阅读

    智谱AI正研发对标Sora的国产文生视频模型

    智谱AI,这家国内估值超过200亿的AI模型独角兽企业,正全力投入研发款与OpenAI的Sora相媲美的国产文生视频
    的头像 发表于 05-07 09:22 464次阅读

    AI训练,为什么需要GPU

    随着由ChatGPT引发的人工智能热潮,GPU成为了AI模型训练平台的基石,甚至是决定性的算力底座。为什么GPU能力压CPU,成为炙手可热的主角呢?要回答这个问题,首先需要了解当前人
    的头像 发表于 04-24 08:05 1075次阅读
    <b class='flag-5'>AI</b>训练,为什么需要<b class='flag-5'>GPU</b>?

    模型时代,国产GPU面临哪些挑战

    国产GPU不断成长的过程中也存在诸多挑战。   模型训练上存在差距   大语言模型是基于
    的头像 发表于 04-03 01:08 4464次阅读
    大<b class='flag-5'>模型</b>时代,<b class='flag-5'>国产</b><b class='flag-5'>GPU</b>面临哪些挑战

    盘点国产GPU支持大模型应用方面的进展

    ,近些年国内也有不少GPU企业逐步成长,虽然模型的训练和推理方面,与英伟达GPU差距极大,但是不可忽视的是,不少
    的头像 发表于 03-29 00:27 5335次阅读
    盘点<b class='flag-5'>国产</b><b class='flag-5'>GPU</b><b class='flag-5'>在</b>支持大<b class='flag-5'>模型</b>应用方面的进展

    FPGA深度学习应用中或将取代GPU

    上涨,因为事实表明,它们的 GPU 训练和运行 深度学习模型 方面效果明显。实际上,英伟达也已经对自己的业务进行了转型,之前它是家纯粹做 GPU
    发表于 03-21 15:19

    谷歌发布基础世界模型Genie,世界模型领域竞争升温

    继OpenAI和Meta之后,谷歌也在世界模型领域公布了其最新进展。据谷歌官网介绍,Genie是个基于互联网视频训练的基础世界模型,能够从合成图像、照片、草图等多种来源生成多种动作可控的环境。
    的头像 发表于 02-28 18:20 1314次阅读

    汽车 EMC 问题一览

    汽车 EMC 问题一览
    的头像 发表于 11-24 16:44 931次阅读
    汽车 EMC 问题<b class='flag-5'>一览</b>

    【KV260视觉入门套件试用体验】Vitis AI 构建开发环境,并使用inspector检查模型

    Vitis AI 的所有工具和库,而不需要在本地安装任何依赖。CPU版本的Vitis AI docker 可以没有 GPU 的机器上运行,但是
    发表于 10-14 15:34