0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

用国产通用GPU打造中国版ChatGPT的算力底座

Felix分析 来源:电子发烧友网 作者:吴子鹏 2023-03-01 01:05 次阅读

电子发烧友网报道(文/吴子鹏)据国信证券统计,ChatGPT今年1月的月活跃用户超过1亿,用户过亿只用了2至3个月,其速度远超过去的推特、海外版抖音等。ChatGPT爆火之后,如何打造中国版的ChatGPT成为热门话题,并且与之相关的AIGC以及其他AI大模型应用也都受到广泛关注。

作为国内头部通用GPU高端芯片及超级算力系统提供商,天数智芯认为,ChatGPT的推广进一步验证了人工智能给工作、生活带来很大帮助,甚至不亚于工业革命的影响,可以亲身体验到其带来的效率上的提升。这种应用是建立在巨大算力模型训练基础上带来的智能处理,因此也带动了0座的需求。

确实,随着以ChatGPT为代表的AIGC应用大火,背后大模型训练所需要的算力也随之暴涨。统计数据显示,ChatGPT的总算力消耗约为3640PF-days(即假如每秒计算一千万亿次,需要计算3640天),整体部署大约需要7-8个500P算力的数据中心。而根据微软官网的消息,微软Azure为OpenAI建设了一个单独的超算中心,具有超过28.5万个CPU核心、1万个GPU和400 GB/s的GPU服务器网络传输带宽。

从成本上看,ChatGPT就像一个吞金兽。数据显示,其运行一次的费用大概需要430万美元。这主要是因为ChatGPT背后的预训练大模型——GPT大模型的GPT-3.5版本是一个“庞然大物”。目前,GPT-3.5模型的参数规模已经达1750亿,原始数据规模达45TB。

天数智芯表示,目前大模型参数已经突破千亿,并有更高的要求,对于训练芯片的通用性及兼容性有更高的要求。训练芯片要能支持更多的算法及改进,而且由于算力需求的规模越来越大,甚至单个算力集群无法满足,对于异构算力、多集群协同等方面有更高的要求,进而对于异构算力上的兼容性就会有更高的要求。同时,由于数据量的急剧提升,对于数据的隐私保护也会有所要求,对于隐私计算在训练芯片上的支持也会有要求。

从微软对ChatGPT的介绍能够看出,这套系统除了模型预训练和日常运行,Finetune模型调优也是关键一环。因此,确实如天数智芯所言,虽然ChatGPT目前的算力规模和运行费用很高,但是这些数字还会与日俱增。

随着ChatGPT在全球范围内大火,目前国内众多科技巨头也相继宣布,将推出自己的类ChatGPT应用。比如国内的百度,根据百度创始人、董事长兼首席执行官李彦宏在一封名为“百度站在AI浪潮之巅”的内部信中表示,百度即将在3月份推出新一代的大语言模型“文心一言”。这也是继“文心一格”(AI作画)、“文心百中”(产业搜索)之后,百度推出的又一大重磅的AI大模型应用。

在中国版ChatGPT不断涌现后,算力芯片作为供给端核心环节将率先受益,而其中又以拥有数量众多的计算单元和超长的流水线的通用GPU需求最为迫切。天数智芯表示,大规模的普及应用会对大模型算法有更高的要求,很多科研及企业也投入到大模型算法的研究中,对于算法模型会有优化和改进,因此对于算力底座支持的通用性及扩展性有很高要求,因此一定程度上会降低对于定制化AI芯片的需求,促进通用GPU市场的发展。

天数智芯自2021年3月推出云端训练通用GPU产品--天垓100,并于2022年12月推出云端推理通用GPU产品--智铠100,截止目前,天数智芯订单规模就已经突破5亿元。目前,基于天垓100训练的模型种类超过了两百种。天数智芯表示,公司在训练芯片上坚持通用GPU架构、主流生态兼容等发展路线,对于通用性、兼容性、安全性等方面都进行了支持,可以为ChatGPT的发展提供有效安全的算力底座。

当然,正如中信证券在研报中指出的,目前在通用GPU方面,国际厂商高精度浮点计算及CUDA生态方面还手握核心的技术壁垒,***和方案在软硬件方面都还有一定的差距。对此,天数智芯回应称,坚持通用GPU发展的路线,全面覆盖训练和推理两条产品发展主线。结合行业解决方案为各行业、各产业发展提供完整成熟的软硬件一体化方案。在未来的产品发展上,逐步缩小和国际先进产品的差距,为国内人工智能发展提供强有力的支持。

从中长期来看,ChatGPT的火爆以及中国版ChatGPT的陆续推出,对通用GPU有着巨大的需求。同时,国内AIGC市场将和信创市场出现叠加效应,让天数智芯等相关厂商长期收益,并借此机会提升产品迭代的速度,逐渐达到国际领先水平。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • gpu
    gpu
    +关注

    关注

    27

    文章

    4422

    浏览量

    126715
  • ChatGPT
    +关注

    关注

    27

    文章

    1409

    浏览量

    4759
收藏 人收藏

    评论

    相关推荐

    在FPGA设计中是否可以应用ChatGPT生成想要的程序呢

    当下AI人工智能崛起,很多开发领域都可看到ChatGPT的身影,FPGA设计中,是否也可以ChatGPT辅助设计呢?
    发表于 03-28 23:41

    iBeLink KS MAX 10.5T大领跑KAS新领域

    打造。这种芯片可以在存储和计算之间实现高速的数据交换,从而提高了运算效率和稳定性。iBeLink ks max10.5T还拥有三档可调的性能模式,可以根据不同的局域网难度和电价,选择合适的和功耗
    发表于 02-20 16:11

    国产FPGA+OMAPL138开发板体验】(原创)6.FPGA连接ChatGPT 4

    。”(FPGA礼貌地表示感谢,并挂断电话) 接下来我将开始一步一步实现。编写一个FPGA访问ChatGPT4的程序代码是一个复杂的过程,涉及到硬件描述语言(如VHDL或Verilog)的编程、网络通信
    发表于 02-14 21:58

    请问强大的SOC来控制汽车是不是能够大幅减少MCU的使用数量?

    来自一位用户的咨询,麻烦帮忙解答,越详细越好,有图有真相,可以适当提供一些英飞凌解决方案和产品推荐。 强大的SOC来控制汽车是不是能够大幅减少MCU的使用数量? 未来电动汽车会使用SOC来代替大量MCU?
    发表于 02-02 07:16

    大茉莉X16-P,5800M大称王称霸

    Rykj365
    发布于 :2024年01月25日 14:54:52

    不到1分钟开发一个GPT应用!各路大神疯狂整活,网友:ChatGPT就是新iPhone

    的能力仍然是不可替代的。 此外,ChatGPT等语言模型的应用也需要大量的数据和支持,以及专业的技术人员进行开发和维护。因此,虽然ChatGPT等语言模型在某些方面具有一定的优势,
    发表于 11-19 12:06

    #GPU显卡 #中国制造  中国GPU面临至暗时刻吗?

    半导体元器件gpu
    深圳市浮思特科技有限公司
    发布于 :2023年11月07日 14:43:15

    孟晚舟称将打造中国算力底座 华为All Intelligence启动

    孟晚舟称将打造中国算力底座 华为All Intelligence启动 AI火爆全球吸引了众多的科技企业投身其中,在今日的华为全联接大会 2023 上,华为副董事长、轮值董事长、CFO 孟晚舟称将
    的头像 发表于 09-20 17:17 697次阅读

    国产GPU打造强大算力底座,天数智芯助力大模型创新发展

    大模型落地实践》的主题演讲,深入介绍了天数智芯通用GPU产品以及自主算力解决方案,为大模型创新发展打造坚实算力底座。 天数智芯副总裁郭为 郭为指出,大模型的飞速发展产生超预期效果,为人
    的头像 发表于 09-07 17:15 642次阅读
    <b class='flag-5'>国产</b><b class='flag-5'>GPU</b><b class='flag-5'>打造</b>强大算力<b class='flag-5'>底座</b>,天数智芯助力大模型创新发展

    GPU国产化率不足1%!沐曦GPU芯片曦思N100和曦云C500火爆登场

    ChatGPT为代表的生成式 AI 应用引发新一轮算力需求,导致供需矛盾特别突出。”沐熙高级产品总监周彬表示。   数字时代爆发的技术变革,使得智能化加速。根据 IDC 数据,2023年全球高性能 AI 服务器市场规模预计达 248 亿美元,年增率预计高达 27%。国产
    的头像 发表于 08-16 01:13 8562次阅读
    <b class='flag-5'>GPU</b><b class='flag-5'>国产</b>化率不足1%!沐曦<b class='flag-5'>GPU</b>芯片曦思N100和曦云C500火爆登场

    星火与昇腾强强联合:通用智能新底座建设意

    讯飞星火和华为昇腾强强联合,推动我国通用智能新底座的建设。这是一次强有力的冲击,对于人工智能产业的发展来说,可谓是意义重大。你有没有想过,大模型能力跃迁背后,到底需要怎样的支撑呢?
    的头像 发表于 07-11 10:16 248次阅读

    对话天数智芯董事长兼CEO盖鲁江:国产通用GPU性能提升的四大抓手

    而言,核心三要素是算法、数据和算力,其中算力是底座。  对于算力而言,目前行业基本的共识是基于通用GPU来构建AI大模型的算力集群,上海天数智芯半导体有限公司(以下简称:天数智芯)是目前国内第一家实现
    的头像 发表于 07-11 01:07 2723次阅读
    对话天数智芯董事长兼CEO盖鲁江:<b class='flag-5'>国产</b><b class='flag-5'>通用</b><b class='flag-5'>GPU</b>性能提升的四大抓手

    你不了解的国产GPU,都处于什么水平?

    国内GPU厂商有各自的专注领域,其中不乏自主研发的产品,在IP、微架构创新、软硬件结合等方面均有建树。随着ChatGPT掀起AI热潮,大模型对算力的要求会越来越高,国内GPU厂商以图形处理、
    的头像 发表于 06-26 14:03 2259次阅读
    你不了解的<b class='flag-5'>国产</b><b class='flag-5'>GPU</b>,都处于什么水平?

    沐曦付轩:蹄急而步稳,GPU助力ChatGPT快、准、稳全面发展

    付轩在“ChatGPT风向下的集成电路新趋势”论坛中发表主题为《蹄急而步稳:ChatGPT与高性能GPU战略概览》的主题演讲,分析了ChatGPT的应用特点及软硬件需求,指出以
    的头像 发表于 06-20 10:57 844次阅读

    天数智芯通用GPU产品为大模型时代提供强大算力底座

    第七届集微半导体峰会于6月初在厦门成功举办,上海天数智芯半导体有限公司(以下简称“天数智芯”)产品线总裁邹翾受邀参加“集微通用芯片行业应用峰会”,发表了题为“国产GPU助力大模型的实践”的主题演讲
    的头像 发表于 06-08 22:55 1030次阅读
    天数智芯<b class='flag-5'>通用</b><b class='flag-5'>GPU</b>产品为大模型时代提供强大算力<b class='flag-5'>底座</b>