0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

从训练到推理,AI 大模型发展有哪五大趋势?IDC专家最新解读

章鹰观察 来源:电子发烧友原创 作者:章鹰 2024-04-17 16:07 次阅读

2024年两会召开后,两会报告把加快发展新质生产力列为十大任务举措之首。新质生产力的核心是用新技术促进产业高端化、智能化和绿色化。ICT产业是发展新质生产力的核心支撑要求,ICT产业正在进入AI无处不在的大转型阶段。

纵观全球,2024年中国GDP增长预期5%,全球平均增长率达到2.6%,美国预期增长2%,印度最为乐观预期今年的GDP增长达到6.2%。从科教兴国的战略看,新质生产力主要涉及的是数字中国的底层基础技术,AI 无处不在,从2022年,ChateGPT3.5发布以来,全球掀起了生成式AI 的热潮。到了2024年,大家都在考虑生成式AI到底给企业带来了哪些价值。

IDC最新的调研显示,28%的受访者标识在过去投资了生成是AI不到一年时间就看到了投资回报,每投资1美元,平均可以获得3.5倍的投资回报,投资回报率最高的用例是自动化IT任务,达到46.5%,也有高达27.1%受访者选择产品与服务创新。AI大模型在使用当中,实际应用开发过程中,开源大模型和商业化模型同时并存,开发者更加倾向于使用开源模型。而且IDC调研显示,数据仓库作为生成是AI 的数据平台发挥着主导作用。

生成式AI支出在全球和中国有什么差异?2024年AI大模型将呈现哪些新的发展趋势?全球AI基础设施市场规模预测?4月16日,在IDC的ICT产业趋势峰会上,来自IDC中国区副总裁兼首席分析师武连和IDC中国区副总裁钟振山做了详细的解读。

生成式AI在全球和中国高速增长

IDC中国区副总裁兼首席分析师武连峰表示,IDC预测,2024年全球生成式AI支出将会达到387.9亿美元,占整体AI比例为16.7%,未来到2027年,生成式AI的全球支持将达到1454.2亿美元,年复合增长率会达到55.3%。2024年,中国生成式AI支出将达到35.3亿美元,占整体AI比例达到16%,未来到2027年中国生成式AI支出预测将达到129.3亿美元。



武连峰指出,整体ICT市场从以增量市场为主转向以存量市场为主,存量市场是小幅度增长的特征,其中企业移动软件、IoT连接、可穿戴设备、移动数据服务增长率在10%以下,增量市场主要包括AI平台、机器人相关的OT服务、AI相关的商业服务等,增长率达到18%到40%之间。

AI大模型未来发展五大趋势


IDC中国区副总裁钟振山表示,2024年AI大模型发展呈现五大趋势。一、中国基础大模型数量趋于收敛,2024年将卷向产业。去年发布的国内大通用大模型发布达到百款,今年我们调研发现更多面向行业或者场景的大模型出现,关注大模型在行业或者企业应用场景的落地,比如网易有道的子曰、好未来的MathGPT、孩子王的KidsGPT面向教育行业,蚂蚁集团推出贞仪、百灵面向金融,还有中科闻歌的雅意大模型面向媒体行业,京东的言犀ChatJD模型面向商业应用场景,加速AI大模型在行业场景的落地。

AI大模型趋势二、开源和闭源共存,共同促进大模型应用生态走向繁荣。钟振山表示,更多企业选择开源的AI大模型来构建自身的应用,现有的开源模型参数大多数是十亿到千亿之间,基于MoE架构的稀疏大模型参数可以达到万亿参数,微调和多种计算资源并行技术变得十分重要。他强调,AI 进入一个变革期,大家关注三个方向:第一、如何快速部署和开发模型;第二、大模型的压缩量化蒸馏;第三、如何搭建一套有效的开源生态,以及不同CPUGPU和XPU的分配。

AI大模型趋势三、大模型向端侧转移,AI推理引起广泛关注。苹果计划推出更智能的Siri, 为端侧大模型生态做积极准备,国内手机厂商华为、小米、Vivo、OPPO和荣耀都推出了手机端大模型,华为手机适配盘古大模型,小米推出MiLM大模型,Vivo适配蓝心大模型,OPPO和荣耀分别推出了安第斯大模型和魔方大模型。AI推理将在手机、PC、耳机、音箱、XR、汽车,以及其他可穿戴新型终端上运行。

钟振山分析说,端侧大模型带来三大优势:1、本地数据处理效率更高,节省云端服务器带宽和算力成本;2、对用户数据可以形成更好的隐私保护;3、端侧大模型可以带来更多交互方式和新体验。

AI大模型趋势四、多模态发展可能会促进市场出现杀手级应用。现在生成式AI 主要在文本、视频、图像、音频领域应用。GPT是基于自然语言技术,对话聊天机器人已经普遍出现,现场他也介绍一家公司通过训练AI垂类模型,初步实现文字生成剧本+漫画+动态视频。

AI大模型趋势五、新一代AI基础设施可能成为下一个战场。新架构主要指灵活调配CPU和GPU资源,边缘计算将云服务扩展到远程,私有云解决数据和运营的合规性问题,高性能主要针对高性能计算和人工智能优化的计算和存储服务,多云集成促进管理和安全的工具,深化合作伙伴关系,主要与行业用户、基础设施提供商和ISV搭建桥梁。

钟振山指出,AI主要用于训练和推理,从训练看,还是云上和本地部署为主的投资方式,推理市场主要是云上算力为主,但是本地、边缘层面都有大量推理算力的需求。推理市场需要一种面向AI工作负载的混合架构模式。

未来随着生成式AI和大模型在企业内部落地之后,在推理方面的需求会大于训练的需求。面向AI的基础架构,包括高性能处理器、下一代存储、超融合系统、高性能AI网络,甚至精密计算、数据中心技术,未来的量子计算都可能成为AI基础架构市场的基石。IDC预测,到2027年,用于边缘推理的AI服务器价值将超过用于本地推理的服务器价值。

本文由电子发烧友原创,转载请注明以上来源。微信号zy1052625525。需入群交流,请添加微信elecfans999,投稿爆料采访需求,请发邮箱zhangying@huaqiu.com。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • IDC
    IDC
    +关注

    关注

    4

    文章

    370

    浏览量

    36913
  • 文心一言
    +关注

    关注

    0

    文章

    112

    浏览量

    871
  • 大模型
    +关注

    关注

    2

    文章

    1543

    浏览量

    1140
  • 生成式AI
    +关注

    关注

    0

    文章

    355

    浏览量

    224
  • 新质生产力
    +关注

    关注

    0

    文章

    30

    浏览量

    76
收藏 人收藏

    评论

    相关推荐

    训练到推理AI模型发展有哪五大趋势IDC专家解读

    2024年两会召开后,两会报告把加快发展新质生产力列为十大任务举措之首。新质生产力的核心是用新技术促进产业高端化、智能化和绿色化。ICT产业是发展新质生产力的核心支撑要求,ICT产业正在进入AI无处不在的大转型阶段。
    的头像 发表于 04-22 07:57 1718次阅读
    从<b class='flag-5'>训练到</b><b class='flag-5'>推理</b>,<b class='flag-5'>AI</b> 大<b class='flag-5'>模型</b><b class='flag-5'>发展</b>有哪<b class='flag-5'>五大趋势</b>?<b class='flag-5'>IDC</b><b class='flag-5'>专家</b><b class='flag-5'>解读</b>

    黑马Groq单挑英伟达,AI芯片要变天?

    AI训练到AI推理
    的头像 发表于 02-26 12:01 127次阅读

    混合专家模型 (MoE)核心组件和训练方法介绍

    ) 的 Transformer 模型在开源人工智能社区引起了广泛关注。在本篇博文中,我们将深入探讨 MoEs 的核心组件、训练方法,以及在推理过程中需要考量的各种因素。 让我们开始吧! 简短总结 混合
    的头像 发表于 01-13 09:37 500次阅读
    混合<b class='flag-5'>专家</b><b class='flag-5'>模型</b> (MoE)核心组件和<b class='flag-5'>训练</b>方法介绍

    AI算法在RZ/V芯片中的移植推理流程

    之前文章已介绍了一些AI算法Demo的应用 ,我们提供从模型训练到RZ/V系列嵌入式端推理应用的完整流程。整体流程如下图所示。
    的头像 发表于 12-20 12:21 664次阅读
    <b class='flag-5'>AI</b>算法在RZ/V芯片中的移植<b class='flag-5'>推理</b>流程

    在线研讨会 | 大模型时代语音 AI 模型训练、优化与应用

    通过业界领先的技术,帮助企业能够快速部署定制化 AI 智能语音端到端流程。 2023 年 12 月 19 日和 21 日 晚间 ,来自 NVIDIA 和 Kaldi 项目的技术专家将做客 Datafun 社区直播间 ,为您介绍如何有针对性的在语音
    的头像 发表于 12-15 15:50 263次阅读
    在线研讨会 | 大<b class='flag-5'>模型</b>时代语音 <b class='flag-5'>AI</b> <b class='flag-5'>模型</b>的<b class='flag-5'>训练</b>、优化与应用

    HarmonyOS:使用MindSpore Lite引擎进行模型推理

    场景介绍 MindSpore Lite 是一款 AI 引擎,它提供了面向不同硬件设备 AI 模型推理的功能,目前已经在图像分类、目标识别、人脸识别、文字识别等应用中广泛使用。 本文介绍
    发表于 12-14 11:41

    AI模型对数据存储技术的发展趋势

    AI模型AI带入新的发展阶段。AI模型需要更高效的海量原始数据收集和预处理,更高性能的
    发表于 10-23 11:26 404次阅读
    <b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>对数据存储技术的<b class='flag-5'>发展趋势</b>

    AscendCL快速入门——模型推理篇(上)

    腾CANN平台专用的离线模型,既然要调用模型进行推理,首先当然是要把模型加载进来,最简单的场景就是磁盘加载一个离线
    发表于 08-24 11:04

    深度学习框架区分训练还是推理

    模型,以便将来能够进行准确的预测。推理是指在训练完成后,使用已经训练好的模型进行新的预测。然而,深度学习框架是否区分
    的头像 发表于 08-17 16:03 1033次阅读

    如何提高YOLOv4模型推理性能?

    使用 PyTorch 对具有非方形图像的 YOLOv4 模型进行了训练。 将 权重转换为 ONNX 文件,然后转换为中间表示 (IR)。 无法确定如何获得更好的推理性能。
    发表于 08-15 06:58

    训练好的ai模型导入cubemx不成功怎么解决?

    训练好的ai模型导入cubemx不成功咋办,试了好几个模型压缩了也不行,ram占用过大,有无解决方案?
    发表于 08-04 09:16

    训练Pytorch模型使用OpenVINO™优化并部署在AI爱克斯开发板

    本文章将依次介绍如何将 Pytorch 自训练模型经过一系列变换变成 OpenVINO IR 模型形式,而后使用 OpenVINO Python API 对 IR 模型进行
    的头像 发表于 05-26 10:23 631次阅读
    自<b class='flag-5'>训练</b>Pytorch<b class='flag-5'>模型</b>使用OpenVINO™优化并部署在<b class='flag-5'>AI</b>爱克斯开发板

    什么是预训练AI模型

    训练 AI 模型是为了完成特定任务而在大型数据集上训练的深度学习模型。这些模型既可以直接使用,
    的头像 发表于 05-25 17:10 639次阅读

    IPv6发展的三大趋势

     IPv6的发展现在有三大趋势:一是过渡在加速,二是从双栈向IPv6单栈发展,三是从IPv6到IPv6﹢的发展
    发表于 05-12 09:59 610次阅读

    中国开源未来发展峰会“问道 AI 分论坛”即将开幕!

    过去几个月,AI 几乎已经成为全民热议的话题。各式开源大模型训练框架层出不穷;AI 技术也加速应用在各个领域和行业,例如服务运营优化、解决供应链问题等等;数据库、云计算、大前端等多类
    发表于 05-09 09:49