0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

用国产通用GPU打造中国版ChatGPT的算力底座

Felix分析 来源:电子发烧友网 作者:吴子鹏 2023-03-01 01:05 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/吴子鹏)据国信证券统计,ChatGPT今年1月的月活跃用户超过1亿,用户过亿只用了2至3个月,其速度远超过去的推特、海外版抖音等。ChatGPT爆火之后,如何打造中国版的ChatGPT成为热门话题,并且与之相关的AIGC以及其他AI大模型应用也都受到广泛关注。

作为国内头部通用GPU高端芯片及超级算力系统提供商,天数智芯认为,ChatGPT的推广进一步验证了人工智能给工作、生活带来很大帮助,甚至不亚于工业革命的影响,可以亲身体验到其带来的效率上的提升。这种应用是建立在巨大算力模型训练基础上带来的智能处理,因此也带动了0座的需求。

确实,随着以ChatGPT为代表的AIGC应用大火,背后大模型训练所需要的算力也随之暴涨。统计数据显示,ChatGPT的总算力消耗约为3640PF-days(即假如每秒计算一千万亿次,需要计算3640天),整体部署大约需要7-8个500P算力的数据中心。而根据微软官网的消息,微软Azure为OpenAI建设了一个单独的超算中心,具有超过28.5万个CPU核心、1万个GPU和400 GB/s的GPU服务器网络传输带宽。

从成本上看,ChatGPT就像一个吞金兽。数据显示,其运行一次的费用大概需要430万美元。这主要是因为ChatGPT背后的预训练大模型——GPT大模型的GPT-3.5版本是一个“庞然大物”。目前,GPT-3.5模型的参数规模已经达1750亿,原始数据规模达45TB。

天数智芯表示,目前大模型参数已经突破千亿,并有更高的要求,对于训练芯片的通用性及兼容性有更高的要求。训练芯片要能支持更多的算法及改进,而且由于算力需求的规模越来越大,甚至单个算力集群无法满足,对于异构算力、多集群协同等方面有更高的要求,进而对于异构算力上的兼容性就会有更高的要求。同时,由于数据量的急剧提升,对于数据的隐私保护也会有所要求,对于隐私计算在训练芯片上的支持也会有要求。

从微软对ChatGPT的介绍能够看出,这套系统除了模型预训练和日常运行,Finetune模型调优也是关键一环。因此,确实如天数智芯所言,虽然ChatGPT目前的算力规模和运行费用很高,但是这些数字还会与日俱增。

随着ChatGPT在全球范围内大火,目前国内众多科技巨头也相继宣布,将推出自己的类ChatGPT应用。比如国内的百度,根据百度创始人、董事长兼首席执行官李彦宏在一封名为“百度站在AI浪潮之巅”的内部信中表示,百度即将在3月份推出新一代的大语言模型“文心一言”。这也是继“文心一格”(AI作画)、“文心百中”(产业搜索)之后,百度推出的又一大重磅的AI大模型应用。

在中国版ChatGPT不断涌现后,算力芯片作为供给端核心环节将率先受益,而其中又以拥有数量众多的计算单元和超长的流水线的通用GPU需求最为迫切。天数智芯表示,大规模的普及应用会对大模型算法有更高的要求,很多科研及企业也投入到大模型算法的研究中,对于算法模型会有优化和改进,因此对于算力底座支持的通用性及扩展性有很高要求,因此一定程度上会降低对于定制化AI芯片的需求,促进通用GPU市场的发展。

天数智芯自2021年3月推出云端训练通用GPU产品--天垓100,并于2022年12月推出云端推理通用GPU产品--智铠100,截止目前,天数智芯订单规模就已经突破5亿元。目前,基于天垓100训练的模型种类超过了两百种。天数智芯表示,公司在训练芯片上坚持通用GPU架构、主流生态兼容等发展路线,对于通用性、兼容性、安全性等方面都进行了支持,可以为ChatGPT的发展提供有效安全的算力底座。

当然,正如中信证券在研报中指出的,目前在通用GPU方面,国际厂商在高精度浮点计算及CUDA生态方面还手握核心的技术壁垒,***和方案在软硬件方面都还有一定的差距。对此,天数智芯回应称,坚持通用GPU发展的路线,全面覆盖训练和推理两条产品发展主线。结合行业解决方案为各行业、各产业发展提供完整成熟的软硬件一体化方案。在未来的产品发展上,逐步缩小和国际先进产品的差距,为国内人工智能发展提供强有力的支持。

从中长期来看,ChatGPT的火爆以及中国版ChatGPT的陆续推出,对通用GPU有着巨大的需求。同时,国内AIGC市场将和信创市场出现叠加效应,让天数智芯等相关厂商长期收益,并借此机会提升产品迭代的速度,逐渐达到国际领先水平。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • gpu
    gpu
    +关注

    关注

    28

    文章

    5099

    浏览量

    134443
  • ChatGPT
    +关注

    关注

    31

    文章

    1596

    浏览量

    10070
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    英伟达失守中国区!推理需求爆发,国产GPU抢滩上市

    亿元。而在此前,另一家国产GPU公司摩尔线程已于9月26日率先过会。这两大GPU企业接连冲刺IPO,背后是中国AI
    的头像 发表于 10-22 09:09 7413次阅读
    英伟达失守<b class='flag-5'>中国</b>区!推理需求爆发,<b class='flag-5'>国产</b><b class='flag-5'>GPU</b>抢滩上市

    湘军,让变成生产

    脑极体
    发布于 :2025年11月25日 22:56:58

    国产AI芯片真能扛住“内卷”?海思昇腾的这波操作藏了多少细节?

    最近行业都在说“是AI的命门”,但国产芯片真的能接住这波需求吗? 前阵子接触到海思昇腾910B,实测下来有点超出预期——7nm工艺下
    发表于 10-27 13:12

    壁仞科技联合三方打造国产集群落地

    近日,由浙江联通、壁仞科技、中兴通讯、优云科技四方联合打造国产集群,在浙江乌镇智中心正式点亮。该集群项目的建成,不仅极大地丰富了浙江
    的头像 发表于 08-01 15:26 1143次阅读

    云XR(AR/VR)底座关键特征与技术路径

    据处理,依托AIDC(人工智能数据中心)提供智能,2024年中国智能增速超65%。 边缘节点‌:通过本地化
    的头像 发表于 06-19 08:10 475次阅读
    云XR(AR/VR)<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>底座</b>关键特征与技术路径

    【「芯片 | 高性能 CPU/GPU/NPU 微架构分析」阅读体验】+NVlink技术从应用到原理

    前言 【「芯片 | 高性能 CPU/GPU/NPU 微架构分析」书中的芯片知识是比较接近当前的顶尖芯片水平的,同时包含了芯片架构的基础知识,但该部分知识比较晦涩难懂,或许是由于我一直从事的事芯片
    发表于 06-18 19:31

    点动科技战略聚焦AI智,领航服务新征程

    Al智业务收入占比已突破40%,标志着点动从传统业务向智能化转型的战略跨越取得阶段性胜利! 技术赋能构建核心壁垒,全栈能力驱动行业智能化升级 在技术布局上,点动科技聚焦行业模型和Al应用,以GPU
    的头像 发表于 05-07 09:29 461次阅读

    搭建中心,从了解的GPU 特性开始

    ABSTRACT摘要本文介绍如何搭建,并介绍A100、H100、H200和B200这些GPU的特性。JAEALOT2025年4月23日随着人工智能、大数据和高性能计算(HPC)的快速发展,市场上
    的头像 发表于 04-24 11:08 2979次阅读
    搭建<b class='flag-5'>算</b><b class='flag-5'>力</b>中心,从了解的<b class='flag-5'>GPU</b> 特性开始

    AI 报告来了!2025中国AI市场将达 259 亿美元

    ,这份报告极具前瞻性与指导意义。报告显示,在规模方面,中国智能增速远超预期,2024年中国
    的头像 发表于 03-07 13:27 1717次阅读
    AI <b class='flag-5'>算</b><b class='flag-5'>力</b>报告来了!2025<b class='flag-5'>中国</b>AI<b class='flag-5'>算</b><b class='flag-5'>力</b>市场将达 259 亿美元

    GPU 加速计算:突破传统瓶颈的利刃

    在数字化时代,数据呈爆炸式增长,传统的已难以满足复杂计算任务的需求。无论是人工智能的深度学习、大数据的分析处理,还是科学研究中的模拟计算,都对提出了极高的要求。而云
    的头像 发表于 02-17 10:36 515次阅读

    GPU租用平台有什么好处

    当今,GPU租用平台为科研机构、企业乃至个人开发者提供了灵活高效的解决方案。下面,AI部落小编带您深入探讨
    的头像 发表于 02-07 10:39 713次阅读

    中心的如何衡量?

    作为当下科技发展的重要基础设施,其的衡量关乎其能否高效支撑人工智能、大数据分析等智能应用的运行。以下是对智中心算衡量的详细阐述:一、
    的头像 发表于 01-16 14:03 4189次阅读
    <b class='flag-5'>算</b>智<b class='flag-5'>算</b>中心的<b class='flag-5'>算</b><b class='flag-5'>力</b>如何衡量?

    中心会取代通用中心吗?

    随着人工智能(AI)技术的飞速发展,计算需求不断攀升,数据中心行业正经历着前所未有的变革。传统的通用中心与新兴的智中心之间的竞争日益激烈。那么,在这样的背景下,
    的头像 发表于 01-06 14:45 888次阅读
    智<b class='flag-5'>算</b>中心会取代<b class='flag-5'>通用</b><b class='flag-5'>算</b><b class='flag-5'>力</b>中心吗?

    首个国产万卡集群!赛思时间同步服务器助力​“东数西”甘肃庆阳枢纽节点打造中国谷」!

    中国信通院云计算与大数据研究所副所长栗蔚指出,对服务而言,东数西的本质就是能够把像水和
    的头像 发表于 12-27 21:22 804次阅读
    首个<b class='flag-5'>国产</b>万卡<b class='flag-5'>算</b><b class='flag-5'>力</b>集群!赛思时间同步服务器助力​“东数西<b class='flag-5'>算</b>”甘肃庆阳枢纽节点<b class='flag-5'>打造</b>「<b class='flag-5'>中国</b><b class='flag-5'>算</b>谷」!