0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

用国产通用GPU打造中国版ChatGPT的算力底座

Felix分析 来源:电子发烧友网 作者:吴子鹏 2023-03-01 01:05 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/吴子鹏)据国信证券统计,ChatGPT今年1月的月活跃用户超过1亿,用户过亿只用了2至3个月,其速度远超过去的推特、海外版抖音等。ChatGPT爆火之后,如何打造中国版的ChatGPT成为热门话题,并且与之相关的AIGC以及其他AI大模型应用也都受到广泛关注。

作为国内头部通用GPU高端芯片及超级算力系统提供商,天数智芯认为,ChatGPT的推广进一步验证了人工智能给工作、生活带来很大帮助,甚至不亚于工业革命的影响,可以亲身体验到其带来的效率上的提升。这种应用是建立在巨大算力模型训练基础上带来的智能处理,因此也带动了0座的需求。

确实,随着以ChatGPT为代表的AIGC应用大火,背后大模型训练所需要的算力也随之暴涨。统计数据显示,ChatGPT的总算力消耗约为3640PF-days(即假如每秒计算一千万亿次,需要计算3640天),整体部署大约需要7-8个500P算力的数据中心。而根据微软官网的消息,微软Azure为OpenAI建设了一个单独的超算中心,具有超过28.5万个CPU核心、1万个GPU和400 GB/s的GPU服务器网络传输带宽。

从成本上看,ChatGPT就像一个吞金兽。数据显示,其运行一次的费用大概需要430万美元。这主要是因为ChatGPT背后的预训练大模型——GPT大模型的GPT-3.5版本是一个“庞然大物”。目前,GPT-3.5模型的参数规模已经达1750亿,原始数据规模达45TB。

天数智芯表示,目前大模型参数已经突破千亿,并有更高的要求,对于训练芯片的通用性及兼容性有更高的要求。训练芯片要能支持更多的算法及改进,而且由于算力需求的规模越来越大,甚至单个算力集群无法满足,对于异构算力、多集群协同等方面有更高的要求,进而对于异构算力上的兼容性就会有更高的要求。同时,由于数据量的急剧提升,对于数据的隐私保护也会有所要求,对于隐私计算在训练芯片上的支持也会有要求。

从微软对ChatGPT的介绍能够看出,这套系统除了模型预训练和日常运行,Finetune模型调优也是关键一环。因此,确实如天数智芯所言,虽然ChatGPT目前的算力规模和运行费用很高,但是这些数字还会与日俱增。

随着ChatGPT在全球范围内大火,目前国内众多科技巨头也相继宣布,将推出自己的类ChatGPT应用。比如国内的百度,根据百度创始人、董事长兼首席执行官李彦宏在一封名为“百度站在AI浪潮之巅”的内部信中表示,百度即将在3月份推出新一代的大语言模型“文心一言”。这也是继“文心一格”(AI作画)、“文心百中”(产业搜索)之后,百度推出的又一大重磅的AI大模型应用。

在中国版ChatGPT不断涌现后,算力芯片作为供给端核心环节将率先受益,而其中又以拥有数量众多的计算单元和超长的流水线的通用GPU需求最为迫切。天数智芯表示,大规模的普及应用会对大模型算法有更高的要求,很多科研及企业也投入到大模型算法的研究中,对于算法模型会有优化和改进,因此对于算力底座支持的通用性及扩展性有很高要求,因此一定程度上会降低对于定制化AI芯片的需求,促进通用GPU市场的发展。

天数智芯自2021年3月推出云端训练通用GPU产品--天垓100,并于2022年12月推出云端推理通用GPU产品--智铠100,截止目前,天数智芯订单规模就已经突破5亿元。目前,基于天垓100训练的模型种类超过了两百种。天数智芯表示,公司在训练芯片上坚持通用GPU架构、主流生态兼容等发展路线,对于通用性、兼容性、安全性等方面都进行了支持,可以为ChatGPT的发展提供有效安全的算力底座。

当然,正如中信证券在研报中指出的,目前在通用GPU方面,国际厂商在高精度浮点计算及CUDA生态方面还手握核心的技术壁垒,***和方案在软硬件方面都还有一定的差距。对此,天数智芯回应称,坚持通用GPU发展的路线,全面覆盖训练和推理两条产品发展主线。结合行业解决方案为各行业、各产业发展提供完整成熟的软硬件一体化方案。在未来的产品发展上,逐步缩小和国际先进产品的差距,为国内人工智能发展提供强有力的支持。

从中长期来看,ChatGPT的火爆以及中国版ChatGPT的陆续推出,对通用GPU有着巨大的需求。同时,国内AIGC市场将和信创市场出现叠加效应,让天数智芯等相关厂商长期收益,并借此机会提升产品迭代的速度,逐渐达到国际领先水平。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • gpu
    gpu
    +关注

    关注

    28

    文章

    5321

    浏览量

    136208
  • ChatGPT
    +关注

    关注

    31

    文章

    1608

    浏览量

    10428
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    英伟达失守中国区!推理需求爆发,国产GPU抢滩上市

    亿元。而在此前,另一家国产GPU公司摩尔线程已于9月26日率先过会。这两大GPU企业接连冲刺IPO,背后是中国AI
    的头像 发表于 10-22 09:09 8742次阅读
    英伟达失守<b class='flag-5'>中国</b>区!推理需求爆发,<b class='flag-5'>国产</b><b class='flag-5'>GPU</b>抢滩上市

    企业如何突破AI困局?2026 年异构管理平台推荐

    时代的管理困局 “买了 GPU 卡,却用不起来”——这是当下许多企业 IT 负责人的真实困扰。 随着生成式 AI 技术的快速普及,企业需求呈指数级增长。据 IDC 数据,2024 年中国
    的头像 发表于 05-20 12:53 71次阅读

    摩尔线程联合光轮智能,以国产+仿真算法,夯实自主可控物理AI底座

    近日,摩尔线程与光轮智能达成战略合作。双方将依托摩尔线程全功能GPU与夸娥(KUAE)智集群,结合光轮智能“求解—测量—生成”三位一体全栈自研仿真平台,联合打造高置信度仿真数据合成方案,以
    的头像 发表于 05-11 18:10 1216次阅读
    摩尔线程联合光轮智能,以<b class='flag-5'>国产</b><b class='flag-5'>算</b><b class='flag-5'>力</b>+仿真算法,夯实自主可控物理AI<b class='flag-5'>底座</b>

    摩尔线程营收暴涨243%:国产GPU如何点燃革命的“中国芯”?

    亿元,再创155.35%的同比增速,毛利率同步提升至65.2%,较上年提升12个百分点。这一数据不仅刷新了国产GPU企业的增长纪录,更标志着中国在高端
    的头像 发表于 04-27 09:39 836次阅读

    端侧AI爆发!斯贝达全栈自研技术,助力国产AI崛起

    AI时代,已成为产业智能化的核心底座国产凭借自主可控、场景适配与安全可靠的优势,在特种
    的头像 发表于 04-14 16:51 5480次阅读

    国产出海元年开启

    节点的亮相则宣告:国产的时代,或许真的来了。随着中国芯片与大规模集群技术的突破,
    的头像 发表于 03-24 15:15 737次阅读
    <b class='flag-5'>国产</b><b class='flag-5'>算</b><b class='flag-5'>力</b>出海元年开启

    【赛题解析】2026集创赛华强x昇腾企业命题!国产AI重塑未来数字幻境!

    国产AI打造下一代沉浸式体验!2026集创赛“华强x昇腾”企业命题火热报名中!本赛题由华强半导体发起、昇腾赋能,聚焦智慧文旅场景。参赛
    的头像 发表于 03-11 08:04 925次阅读
    【赛题解析】2026集创赛华强x昇腾企业命题!<b class='flag-5'>用</b><b class='flag-5'>国产</b>AI<b class='flag-5'>算</b><b class='flag-5'>力</b>重塑未来数字幻境!

    科大讯飞正式发布基于全国产训练的星火X2大模型

    这次面向关键行业落地的实用化升级,标志着我国基于全国产训练的大模型底座在算法和工程创新方面迈入新阶段。星火X2在实现通用能力全面升级的同
    的头像 发表于 02-25 10:05 1066次阅读

    壁仞科技助力湖南移动国产资源池成功点亮

    12月15日,由湖南移动、壁仞科技、中兴通讯三方联合打造的湖南移动国产资源池全面建成并成功点亮。
    的头像 发表于 12-25 09:57 598次阅读

    湘军,让变成生产

    脑极体
    发布于 :2025年11月25日 22:56:58

    国产AI芯片真能扛住“内卷”?海思昇腾的这波操作藏了多少细节?

    最近行业都在说“是AI的命门”,但国产芯片真的能接住这波需求吗? 前阵子接触到海思昇腾910B,实测下来有点超出预期——7nm工艺下
    发表于 10-27 13:12

    首款全国产通用GPU芯片发布 沐曦集成推出曦云C600

    沐曦集成电路(南京)有限公司近日正式发布了首款全国产通用GPU——曦云C600,这标志着国产高性能GPU实现历史性突破。 据新华日报报道显示
    的头像 发表于 10-19 20:04 4.7w次阅读

    壁仞科技联合三方打造国产集群落地

    近日,由浙江联通、壁仞科技、中兴通讯、优云科技四方联合打造国产集群,在浙江乌镇智中心正式点亮。该集群项目的建成,不仅极大地丰富了浙江
    的头像 发表于 08-01 15:26 1723次阅读

    云XR(AR/VR)底座关键特征与技术路径

    据处理,依托AIDC(人工智能数据中心)提供智能,2024年中国智能增速超65%。 边缘节点‌:通过本地化
    的头像 发表于 06-19 08:10 967次阅读
    云XR(AR/VR)<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>底座</b>关键特征与技术路径

    【「芯片 | 高性能 CPU/GPU/NPU 微架构分析」阅读体验】+NVlink技术从应用到原理

    前言 【「芯片 | 高性能 CPU/GPU/NPU 微架构分析」书中的芯片知识是比较接近当前的顶尖芯片水平的,同时包含了芯片架构的基础知识,但该部分知识比较晦涩难懂,或许是由于我一直从事的事芯片
    发表于 06-18 19:31