0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

国产GPU在AI大模型领域的应用案例一览

Carol Li 来源:电子发烧友网原创 作者:李弯弯 2024-04-01 09:28 次阅读
电子发烧友网报道(文/李弯弯)近一年多时间,随着大模型的发展,GPUAI领域的重要性再次凸显。虽然相比英伟达等国际大厂,国产GPU起步较晚、声势较小。不过近几年,国内不少GPU厂商成长非常快,并且不断推出新品,产品也逐渐在各个领域取得应用,而且在大模型的训练和推理方面,也有所建树。

国产GPU在大模型上的应用进展

电子发烧友此前就统计过目前国内主要的GPU厂商,也介绍了这些厂商主要的产品及产品发布、量产进展情况。可以看到,其实近几年已经有不少产品面世并应用。

如沐曦集成,其N系列用于AI推理的GPU芯片早已量产。去年9月,该公司宣布,其与眸瑞科技联合发布了首个AI模型“贴图超分”技术。该技术依托曦思N系列AI推理GPU首款产品曦思N100的强大算力,结合眸瑞科技丰富的算法库资源和先进的AI超分算法,首次将AI超分成功应用到了3D模型领域。

曦思N100是沐曦面向人工智能推理场景推出的高效能GPU产品,针对AI推理及AI应用场景中大量的视频图像处理任务,提供强大的AI算力和视频/图像编解码功能。据称,目前沐曦已联合合作伙伴打造了多种基于曦思N100 的解决方案,如高密度视频结构化分析解决方案、高并发智能转码解决方案、光电混合异构计算解决方案等,这些方案可广泛应用于城市安防、智慧交通、工业视觉、短视频、云计算和智算中心等多个领域。

再如天数智芯,其提供的算力集群具有支持百亿级参数大模型训练的能力。早前有消息,天数智芯与智源研究院、爱特云翔合作,开展基于自主通用GPU的大模型CodeGen(高效编码)项目,通过中文描述来生成可用的C、JavaPython代码以实现高效编码。

智源研究院负责算法设计、训练框架开发、大模型的训练与调优,天数智芯负责提供天垓100加速卡、构建算力集群及全程技术支持,爱特云翔负责提供算存网基础硬件及智能化运维服务。在天垓100加速卡的算力集群,基于智源研究院70亿参数的Aquila语言基础模型,使用代码数据进行继续训练,稳定运行19天,模型收敛效果符合预期。

近一年多来,随着大模型的发展,国产GPU公司都在朝着大模型领域布局。摩尔线程此前也透露,公司已经可以支持3亿参数量模型的训练,2022年底就提前布局了自然语言模型预训练,自研了MusaBert模型。

还有登临科技,该公司此前也表示,公司首款产品Goldwasser已规模化运用在多家行业知名企业的主营业务中,新一代Goldwasser产品针对基于Transformer的网络和生成式AI类大模型的应用在性能有大幅提升。

国产GPU应用于AI领域的多个方面

除了上述谈到应用案例,国产GPU在AI领域的应用案例还有很多,主要涉及到深度学习、自然语言处理以及计算机视觉等多个方面。

如,在计算机视觉领域,国产GPU被广泛应用于图像识别和目标检测等任务。例如,利用GPU加速的深度学习模型可以大幅提升算法的准确性和实时性,这在安防监控、自动驾驶等实际应用中具有重要的价值。

在自然语言处理方面,国产GPU也在发挥重要作用。通过GPU加速的循环神经网络、Transformer等模型,可以实现高效的机器翻译、文本生成等任务。这对于提升智能客服、智能写作等应用的性能具有关键作用。

国产GPU还在强化学习领域得到了应用。强化学习是AI领域的一个重要分支,其目标是通过与环境的交互来学习策略。GPU加速的价值网络、策略网络等模型可以应用于游戏AI、机器人控制等领域,从而提高智能体的学习效率和性能。

另外值得关注的还有,国产GPU在自动驾驶领域的应用也比较多。自动驾驶系统需要处理大量的传感器数据,包括来自摄像头、雷达、激光雷达等的信息。GPU通过其强大的并行计算能力和高效的内存管理,可以实时处理这些数据,并为自动驾驶系统提供准确的决策依据。

例如,一些国产汽车厂商已经开始在其自动驾驶系统中采用国产GPU。这些GPU不仅用于图像处理和计算机视觉任务,如目标检测、车道线识别等,还用于深度学习模型的推理和决策。通过GPU的加速,自动驾驶系统可以更快地识别交通信号、障碍物以及其他重要信息,从而提高行车安全性。

此外,国产GPU还在自动驾驶的地图构建和定位方面发挥了重要作用。通过利用GPU进行高效的地图数据处理和实时定位计算,自动驾驶系统可以更加准确地感知周围环境,并实现精确的导航和路径规划。

具体来说,百度Apollo、小马智行等自动驾驶技术公司,都在其自动驾驶解决方案中采用了国产GPU。这些解决方案不仅应用于乘用车,还扩展到商用车、物流车等多个领域。

写在最后

从目前的情况来看,国内外GPU厂商都在追逐大模型应用带来的机会。当前无论是大模型训练还是推理,英伟达GPU都占据了绝大部分市场。对于国产厂商来说,为了在大模型方面拥有更多自主权,仍然需要持续在大模型训练方面发力,同时相对大模型训练来说,大模型接下来大面积的部署,对于推理芯片的需要将会很大,这将是一个更容易把握的机会。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • gpu
    gpu
    +关注

    关注

    27

    文章

    4424

    浏览量

    126724
  • AI
    AI
    +关注

    关注

    87

    文章

    26472

    浏览量

    264106
  • 大模型
    +关注

    关注

    2

    文章

    1543

    浏览量

    1139
  • AI大模型
    +关注

    关注

    0

    文章

    200

    浏览量

    94
收藏 人收藏

    评论

    相关推荐

    模型时代,国产AI芯片最新进展!算力集群化是必然趋势

    、算力提供商也针对大模型展示了相应的方案。   大模型时代,国产AI 芯片进展如何?   在这次大会上,瀚博半导体、燧原科技、登临科技、天数智芯等纷纷展示了针对大
    的头像 发表于 07-11 09:05 1419次阅读
    大<b class='flag-5'>模型</b>时代,<b class='flag-5'>国产</b><b class='flag-5'>AI</b>芯片最新进展!算力集群化是必然趋势

    模型时代,国产GPU面临哪些挑战

    国产GPU在不断成长的过程中也存在诸多挑战。   在大模型训练上存在差距   大语言模型是基于深度学习的技术。这些模型通过在海量文本数据上
    的头像 发表于 04-03 01:08 3137次阅读
    大<b class='flag-5'>模型</b>时代,<b class='flag-5'>国产</b><b class='flag-5'>GPU</b>面临哪些挑战

    盘点国产GPU在支持大模型应用方面的进展

    ,近些年国内也有不少GPU企业在逐步成长,虽然在大模型的训练和推理方面,与英伟达GPU差距极大,但是不可忽视的是,不少国产GPU企业也在
    的头像 发表于 03-29 00:27 3098次阅读
    盘点<b class='flag-5'>国产</b><b class='flag-5'>GPU</b>在支持大<b class='flag-5'>模型</b>应用方面的进展

    FPGA深度学习应用中或将取代GPU

    上涨,因为事实表明,它们的 GPU 训练和运行 深度学习模型 方面效果明显。实际上,英伟达也已经对自己的业务进行了转型,之前它是家纯粹做 GPU
    发表于 03-21 15:19

    防止AI模型被黑客病毒入侵控制(原创)聆思大模型AI开发套件评测4

    训练只聪明的AI小动物解决实际问题,通过构建神经网络模型并进行推理,让电脑也能像人样根据输入信息做出决策。 在上述示例中,我创建了
    发表于 03-19 11:18

    【书籍评测活动NO.30】大规模语言模型:从理论到实践

    。国内的文心言就属于这类。 垂直大模型,聚焦解决垂直领域问题,是通用大模型的基础上训练行业
    发表于 03-11 15:16

    谷歌发布基础世界模型Genie,世界模型领域竞争升温

    继OpenAI和Meta之后,谷歌也在世界模型领域公布了其最新进展。据谷歌官网介绍,Genie是一个基于互联网视频训练的基础世界模型,能够从合成图像、照片、草图等多种来源生成多种动作可控的环境。
    的头像 发表于 02-28 18:20 1059次阅读

    AI模型怎么解决芯片过剩?

    AI模型
    电子发烧友网官方
    发布于 :2024年01月02日 15:42:05

    AI模型可以设计电路吗?

    AI模型
    电子发烧友网官方
    发布于 :2024年01月02日 15:09:29

    【KV260视觉入门套件试用体验】Vitis AI 构建开发环境,并使用inspector检查模型

    Vitis AI 的所有工具和库,而不需要在本地安装任何依赖。CPU版本的Vitis AI docker 可以没有 GPU 的机器上运行,但是
    发表于 10-14 15:34

    沐曦首次将AI超分成功应用到3D模型领域

    算力,结合眸瑞科技丰富的算法库资源和先进的AI超分算法,首次将AI超分成功应用到了3D模型领域,实力打造自主可控、安全可信的国产软硬件一体化解决方案,为企业单位和专业创作者提供一个安全
    的头像 发表于 09-06 14:11 600次阅读

    盘古ai模型用的什么芯片?

    ,具有自学能力,能够自动从大量数据中提取并学习规律,从而实现人工智能的基础。 盘古AI模型采用了GPU(图形处理器)加速技术,GPU优化的算法使其在短时间内能够完成非常庞大的数据集的
    的头像 发表于 08-31 09:01 2417次阅读

    沐曦基于曦云C500发布国产首台GPU千亿参数大模型训推一体机

    首台GPU千亿参数大模型训推一体机由数字宁夏倡议发起技术攻关,基于沐曦最新发布的曦云C500旗舰GPU芯片提供的算力支持、智谱华章的AI模型
    的头像 发表于 08-21 14:41 2931次阅读

    模型AI算力剧增,谁来扛国产GPU大旗?

    众所周知,人工智能(尤其是大模型新兴应用领域)对AI算力需求超过了通用CPU的摩尔定律的发展速度,而异构计算的性能增长恰恰能够满足这些新兴领域的算力需求发展方向和趋势。
    的头像 发表于 08-15 16:51 1129次阅读
    大<b class='flag-5'>模型</b><b class='flag-5'>AI</b>算力剧增,谁来扛<b class='flag-5'>国产</b><b class='flag-5'>GPU</b>大旗?

    AI模型在医疗领域起飞

    模型,包括在医疗领域。   众多企业宣布推出医疗大模型   日前,京东发布了京东言犀大模型、言犀AI开发计算平台,同时基于京东言犀通用大
    的头像 发表于 07-25 00:12 1496次阅读