0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

从训练到推理,AI 大模型发展有哪五大趋势?IDC专家最新解读

章鹰观察 来源:电子发烧友原创 作者:章鹰 2024-04-17 16:07 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

2024年两会召开后,两会报告把加快发展新质生产力列为十大任务举措之首。新质生产力的核心是用新技术促进产业高端化、智能化和绿色化。ICT产业是发展新质生产力的核心支撑要求,ICT产业正在进入AI无处不在的大转型阶段。

纵观全球,2024年中国GDP增长预期5%,全球平均增长率达到2.6%,美国预期增长2%,印度最为乐观预期今年的GDP增长达到6.2%。从科教兴国的战略看,新质生产力主要涉及的是数字中国的底层基础技术,AI 无处不在,从2022年,ChateGPT3.5发布以来,全球掀起了生成式AI 的热潮。到了2024年,大家都在考虑生成式AI到底给企业带来了哪些价值。

IDC最新的调研显示,28%的受访者标识在过去投资了生成是AI不到一年时间就看到了投资回报,每投资1美元,平均可以获得3.5倍的投资回报,投资回报率最高的用例是自动化IT任务,达到46.5%,也有高达27.1%受访者选择产品与服务创新。AI大模型在使用当中,实际应用开发过程中,开源大模型和商业化模型同时并存,开发者更加倾向于使用开源模型。而且IDC调研显示,数据仓库作为生成是AI 的数据平台发挥着主导作用。

生成式AI支出在全球和中国有什么差异?2024年AI大模型将呈现哪些新的发展趋势?全球AI基础设施市场规模预测?4月16日,在IDC的ICT产业趋势峰会上,来自IDC中国区副总裁兼首席分析师武连和IDC中国区副总裁钟振山做了详细的解读。

生成式AI在全球和中国高速增长

IDC中国区副总裁兼首席分析师武连峰表示,IDC预测,2024年全球生成式AI支出将会达到387.9亿美元,占整体AI比例为16.7%,未来到2027年,生成式AI的全球支持将达到1454.2亿美元,年复合增长率会达到55.3%。2024年,中国生成式AI支出将达到35.3亿美元,占整体AI比例达到16%,未来到2027年中国生成式AI支出预测将达到129.3亿美元。



武连峰指出,整体ICT市场从以增量市场为主转向以存量市场为主,存量市场是小幅度增长的特征,其中企业移动软件、IoT连接、可穿戴设备、移动数据服务增长率在10%以下,增量市场主要包括AI平台、机器人相关的OT服务、AI相关的商业服务等,增长率达到18%到40%之间。

AI大模型未来发展五大趋势


IDC中国区副总裁钟振山表示,2024年AI大模型发展呈现五大趋势。一、中国基础大模型数量趋于收敛,2024年将卷向产业。去年发布的国内大通用大模型发布达到百款,今年我们调研发现更多面向行业或者场景的大模型出现,关注大模型在行业或者企业应用场景的落地,比如网易有道的子曰、好未来的MathGPT、孩子王的KidsGPT面向教育行业,蚂蚁集团推出贞仪、百灵面向金融,还有中科闻歌的雅意大模型面向媒体行业,京东的言犀ChatJD模型面向商业应用场景,加速AI大模型在行业场景的落地。

AI大模型趋势二、开源和闭源共存,共同促进大模型应用生态走向繁荣。钟振山表示,更多企业选择开源的AI大模型来构建自身的应用,现有的开源模型参数大多数是十亿到千亿之间,基于MoE架构的稀疏大模型参数可以达到万亿参数,微调和多种计算资源并行技术变得十分重要。他强调,AI 进入一个变革期,大家关注三个方向:第一、如何快速部署和开发模型;第二、大模型的压缩量化蒸馏;第三、如何搭建一套有效的开源生态,以及不同CPUGPU和XPU的分配。

AI大模型趋势三、大模型向端侧转移,AI推理引起广泛关注。苹果计划推出更智能的Siri, 为端侧大模型生态做积极准备,国内手机厂商华为、小米、Vivo、OPPO和荣耀都推出了手机端大模型,华为手机适配盘古大模型,小米推出MiLM大模型,Vivo适配蓝心大模型,OPPO和荣耀分别推出了安第斯大模型和魔方大模型。AI推理将在手机、PC、耳机、音箱、XR、汽车,以及其他可穿戴新型终端上运行。

钟振山分析说,端侧大模型带来三大优势:1、本地数据处理效率更高,节省云端服务器带宽和算力成本;2、对用户数据可以形成更好的隐私保护;3、端侧大模型可以带来更多交互方式和新体验。

AI大模型趋势四、多模态发展可能会促进市场出现杀手级应用。现在生成式AI 主要在文本、视频、图像、音频领域应用。GPT是基于自然语言技术,对话聊天机器人已经普遍出现,现场他也介绍一家公司通过训练AI垂类模型,初步实现文字生成剧本+漫画+动态视频。

AI大模型趋势五、新一代AI基础设施可能成为下一个战场。新架构主要指灵活调配CPU和GPU资源,边缘计算将云服务扩展到远程,私有云解决数据和运营的合规性问题,高性能主要针对高性能计算和人工智能优化的计算和存储服务,多云集成促进管理和安全的工具,深化合作伙伴关系,主要与行业用户、基础设施提供商和ISV搭建桥梁。

钟振山指出,AI主要用于训练和推理,从训练看,还是云上和本地部署为主的投资方式,推理市场主要是云上算力为主,但是本地、边缘层面都有大量推理算力的需求。推理市场需要一种面向AI工作负载的混合架构模式。

未来随着生成式AI和大模型在企业内部落地之后,在推理方面的需求会大于训练的需求。面向AI的基础架构,包括高性能处理器、下一代存储、超融合系统、高性能AI网络,甚至精密计算、数据中心技术,未来的量子计算都可能成为AI基础架构市场的基石。IDC预测,到2027年,用于边缘推理的AI服务器价值将超过用于本地推理的服务器价值。

本文由电子发烧友原创,转载请注明以上来源。微信号zy1052625525。需入群交流,请添加微信elecfans999,投稿爆料采访需求,请发邮箱zhangying@huaqiu.com。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • IDC
    IDC
    +关注

    关注

    4

    文章

    420

    浏览量

    38246
  • 文心一言
    +关注

    关注

    0

    文章

    134

    浏览量

    2093
  • 大模型
    +关注

    关注

    2

    文章

    3447

    浏览量

    4973
  • 生成式AI
    +关注

    关注

    0

    文章

    537

    浏览量

    1021
  • 新质生产力
    +关注

    关注

    0

    文章

    97

    浏览量

    481
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    什么是AI模型推理能力

    NVIDIA 的数据工厂团队为 NVIDIA Cosmos Reason 等 AI 模型奠定了基础,该模型近日在 Hugging Face 的物理推理模型排行榜中位列榜首。
    的头像 发表于 09-23 15:19 843次阅读

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片到AGI芯片

    、分布式群体智能 1)物联网AGI系统 优势: 组成部分: 2)分布式AI训练 7、发展重点:基于强化学习的后训练推理 8、超越大
    发表于 09-18 15:31

    摩尔线程“AI工厂”:五大核心技术支撑,打造大模型训练超级工厂

    演讲中表示,为应对生成式AI爆发式增长下的大模型训练效率瓶颈,摩尔线程将通过系统级工程创新,构建新一代AI训练基础设施,致力于为AGI时代打
    的头像 发表于 07-28 11:28 4002次阅读
    摩尔线程“<b class='flag-5'>AI</b>工厂”:<b class='flag-5'>五大</b>核心技术支撑,打造大<b class='flag-5'>模型</b><b class='flag-5'>训练</b>超级工厂

    【「DeepSeek 核心技术揭秘」阅读体验】书籍介绍+第一章读后心得

    剖析 DeepSeek-V3 的模型架构、训练框架、推理阶段优化、后训练优化等关键技术。混合专家
    发表于 07-17 11:59

    信而泰×DeepSeek:AI推理引擎驱动网络智能诊断迈向 “自愈”时代

    网络智能诊断平台。通过对私有化网络数据的定向训练,信而泰打造了高性能、高可靠性的网络诊断模型,显著提升了AI辅助诊断的精准度与实用性。该方案实现了网络全流量深度解析能力与AI智能
    发表于 07-16 15:29

    首创开源架构,天玑AI开发套件让端侧AI模型接入得心应手

    科正将AI能力体系化并赋能终端生态。 大会上,联发科定义了“智能体化用户体验”的五大特征:主动及时、知你懂你、互动协作、学习进化和专属隐私信息守护。这五大特征需要跨越芯片、
    发表于 04-13 19:52

    谷歌第七代TPU Ironwood深度解读AI推理时代的硬件革命

    谷歌第七代TPU Ironwood深度解读AI推理时代的硬件革命 Google 发布了 Ironwood,这是其第七代张量处理单元 (TPU),专为推理而设计。这款功能强大的
    的头像 发表于 04-12 11:10 2926次阅读
    谷歌第七代TPU Ironwood深度<b class='flag-5'>解读</b>:<b class='flag-5'>AI</b><b class='flag-5'>推理</b>时代的硬件革命

    英伟达Cosmos-Reason1 模型深度解读

    。以下技术架构、训练策略、核心能力及行业影响四方面展开深度解读: Cosmos-Reason 1:物理 AI 常识到具体决策 物理
    的头像 发表于 03-29 23:29 2624次阅读

    阵列云训练到推理

    在云场景下,阵列云(分布式计算集群)模型训练到推理的完整技术流程可结构化分解如下: 一、训练阶段技术实现 1,资源动态编排‌ 基于Kube
    的头像 发表于 03-28 08:32 541次阅读

    训练好的ai模型导入cubemx不成功怎么处理?

    训练好的ai模型导入cubemx不成功咋办,试了好几个模型压缩了也不行,ram占用过大,有无解决方案?
    发表于 03-11 07:18

    让大模型训练更高效,奇异摩尔用互联创新方案定义下一代AI计算

    训练成本,使得企业能够以低成本实现高性能AI模型训练;在推理端,DeepSeek加速了AI
    的头像 发表于 02-18 09:19 1920次阅读
    让大<b class='flag-5'>模型</b><b class='flag-5'>训练</b>更高效,奇异摩尔用互联创新方案定义下一代<b class='flag-5'>AI</b>计算

    戴尔副总裁揭示:智能边缘发展五大定义趋势

    副总裁Pierluca Chiodelli向我们揭示了2025年决定边缘人工智能发展五大关键技术趋势“指令执行”到“自主行动” 首先,是向代理
    的头像 发表于 02-12 10:01 1248次阅读

    AI开发平台模型怎么用

    AI开发平台极大地简化了AI应用的开发流程,环境搭建、模型训练到部署集成,每一步都提供了丰富的工具和资源。那么,
    的头像 发表于 02-11 09:53 617次阅读

    德州仪器分析服务器电源设计中的五大趋势

    服务器电源设计中的五大趋势: 功率预算、冗余、效率、工作温度 以及通信和控制 并分析预测 服务器 PSU 的未来发展趋势
    的头像 发表于 01-11 10:15 2230次阅读
    德州仪器分析服务器电源设计中的<b class='flag-5'>五大趋势</b>

    GPU是如何训练AI模型

    AI模型训练过程中,大量的计算工作集中在矩阵乘法、向量加法和激活函数等运算上。这些运算正是GPU所擅长的。接下来,AI部落小编带您了解GPU是如何
    的头像 发表于 12-19 17:54 1345次阅读