0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI变革正在推动终端侧推理创新

高通中国 来源:高通中国 2025-02-20 10:54 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

尖端AI推理模型DeepSeek R1一经问世,便在整个科技行业引起波澜。因其性能能够媲美甚至超越先进的同类模型,颠覆了关于AI发展的传统认知。

这一关键时刻是更广泛趋势的一部分,凸显了行业在打造高质量小语言模型和多模态推理模型方面的创新,以及这些创新正在为AI的商用应用和终端侧推理落地做好准备。这些新模型能够在终端侧运行,将加速强大边缘侧芯片的规模化扩展,并创造对此类芯片的需求。

四大趋势正在显著提高目前可在终端侧运行的AI模型的质量、性能和效率,从而推动上述变革:

· 当前先进的AI小模型已具有卓越性能。模型蒸馏和新颖的AI网络架构等新技术能够在不影响质量的情况下简化开发流程,让新模型的表现超越一年前推出的仅能在云端运行的更大模型。

· 模型参数规模正在快速缩小。先进的量化和剪枝技术使开发者能够在不对准确性产生实质影响的情况下,缩小模型参数规模。

· 开发者能够在边缘侧打造更丰富的应用。高质量AI模型快速激增,意味着文本摘要、编程助手和实时翻译等特性在智能手机等终端上的普及,让AI能够支持跨边缘侧规模化部署的商用应用。

· AI正在成为新的UI。个性化多模态AI智能体将简化交互,高效地跨越各种应用完成任务。

高通技术公司在引领并利用从AI训练向大规模推理转型,以及AI计算处理从云端向边缘侧扩展方面具有战略优势。公司在开发定制CPU、NPU、GPU和低功耗子系统领域取得了广泛的成就。通过与模型厂商展开合作,以及面向跨不同边缘终端领域的模型部署提供工具、框架和SDK,高通技术公司赋能开发者在边缘侧加速采用AI智能体和应用。

近期对AI模型训练方式的颠覆变革和重新评估验证了AI格局即将向大规模推理转变的趋势,这将形成全新边缘侧推理计算的创新和升级周期。尽管模型训练仍将在云端进行,但推理将受益于采用高通技术的广泛终端规模,并催生更多边缘侧AI赋能处理器的需求。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 高通
    +关注

    关注

    78

    文章

    7747

    浏览量

    200328
  • AI
    AI
    +关注

    关注

    91

    文章

    41060

    浏览量

    302568
  • 模型
    +关注

    关注

    1

    文章

    3816

    浏览量

    52265

原文标题:AI变革正在推动终端侧推理创新

文章出处:【微信号:Qualcomm_China,微信公众号:高通中国】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    大为创芯进军AI眼镜存储,端AI存储全面布局

    当前大模型应用持续渗透,AI 产业正迎来一轮关键的架构迁移,AI 存储正从以云端集中处理为主,逐步向终端与边缘下沉延伸。这一趋势让端存储
    的头像 发表于 04-03 10:20 4074次阅读
    大为创芯进军<b class='flag-5'>AI</b>眼镜存储,端<b class='flag-5'>侧</b><b class='flag-5'>AI</b>存储全面布局

    AI进入爆发期,江波龙“集成存储”引领AI PC/手机、可穿戴存储创新

    从DeepSeek AI推理大模型到今年爆火的OpenClaw AI智能体,端AI市场被彻底引爆。如果说
    的头像 发表于 04-01 10:06 5044次阅读
    端<b class='flag-5'>侧</b><b class='flag-5'>AI</b>进入爆发期,江波龙“集成存储”引领<b class='flag-5'>AI</b> PC/手机、可穿戴存储<b class='flag-5'>创新</b>

    MemoryS 2026|江波龙首发SPU及iSA,端AI存储创新布局八大看点分享

    2026年3月27日,CFM|MemoryS2026在深圳盛大启幕,全球存储产业链精英齐聚,共探AI时代存储产业的变革与未来。江波龙董事长、总经理蔡华波受邀出席并发表《集成存储探索端AI
    的头像 发表于 03-27 16:02 942次阅读
    MemoryS 2026|江波龙首发SPU及iSA,端<b class='flag-5'>侧</b><b class='flag-5'>AI</b>存储<b class='flag-5'>创新</b>布局八大看点分享

    富瀚微推动OpenClaw实现端本地运行验证

    随着生成式人工智能持续突破,AI正从“内容生成工具”向具备自主执行能力的智能体形态加速演进。在这一背景下,AI Agent正逐步成为推动智能终端升级的重要技术方向。如何在
    的头像 发表于 03-17 17:27 1060次阅读
    富瀚微<b class='flag-5'>推动</b>OpenClaw实现端<b class='flag-5'>侧</b>本地运行验证

    推理:FPGA正崛起为“非GPU”阵营的中坚力量

    随着AI应用的迅猛发展,端推理正受到前所未有的关注。与数据中心对极致吞吐的追求不同,端推理更聚焦于低延迟、低功耗与高可靠性,其应用场景呈
    的头像 发表于 01-23 17:17 3083次阅读
    端<b class='flag-5'>侧</b><b class='flag-5'>推理</b>:FPGA正崛起为“非GPU”阵营的中坚力量

    Arm解析未来AI领域创新技术发展趋势

    终端及边缘人工智能 (AI) 环境的无缝互联。基于这一趋势,Arm 发布了 20 项技术预测,这些技术将引领今年的创新浪潮。上周我们已经针对芯片创新,为大家介绍了四大关键趋势,本期我们
    的头像 发表于 01-22 14:16 774次阅读

    恩智浦借助边缘AI技术推动水质pH监测领域变革

    气候变化正加剧水资源短缺、供应安全与水质稳定性的挑战,在此背景下,pH测量与监测已成为一个关键环节。安全卫生的饮用水是生命的基石,也是联合国可持续发展目标6的核心内容。如今,以边缘AI与机器学习推理技术为引擎,恩智浦正在
    的头像 发表于 12-19 16:34 1934次阅读

    广和通创新发布AI Dongle解决方案

    11月20日,广和通创新发布AI Dongle解决方案,为个人PC、NAS等设备提供移动AI算力支持。该方案内置高性能、低功耗NPU,使得终端在边缘
    的头像 发表于 11-26 15:47 864次阅读

    2025骁龙人工智能创新应用大赛正式启动

    在端智能与生成式AI加速融合的新时代,搭载强大本地算力的AI终端设备正在成为推动技术
    的头像 发表于 10-22 10:14 1142次阅读

    此芯科技发布“合一”AI加速计划,赋能边缘与端AI创新

    产品组合,覆盖从1.5B至32B参数规模的端AI模型推理需求,满足工业、消费电子、智能终端等多样化场景的部署需求,推动
    的头像 发表于 09-15 11:53 2011次阅读
    此芯科技发布“合一”<b class='flag-5'>AI</b>加速计划,赋能边缘与端<b class='flag-5'>侧</b><b class='flag-5'>AI</b><b class='flag-5'>创新</b>

    AI推理赋能效率革命,美格智能多领域落地打造行业范本

    产业进阶:端AI推理助手成为应用刚需作为人工智能技术最普遍的产品形式之一,“AI助手”已成为各类软件、终端的重要组成部分,成为AIAgen
    的头像 发表于 08-25 17:06 4135次阅读
    端<b class='flag-5'>侧</b><b class='flag-5'>AI</b><b class='flag-5'>推理</b>赋能效率革命,美格智能多领域落地打造行业范本

    华为亮相2025金融AI推理应用落地与发展论坛

    创新技术——UCM推理记忆数据管理器,旨在推动AI推理体验升级,提升推理性价比,加速
    的头像 发表于 08-15 09:45 1377次阅读

    今日看点丨华为发布AI推理创新技术UCM;比亚迪汽车出口暴增130%

        降低HBM依赖,华为发布AI推理创新技术UCM   日前,华为正式发布AI推理创新技术U
    发表于 08-13 09:45 5710次阅读

    AI智能体:推动企业变革的核心驱动力

    在数字经济时代,AI智能体正成为推动企业变革的核心驱动力。作为融合人工智能技术与业务场景的数字化代理,AI智能体通过模拟人类认知与决策能力,为企业创造多维度的价值增长点。这类智能系统不
    的头像 发表于 07-29 17:22 844次阅读
    <b class='flag-5'>AI</b>智能体:<b class='flag-5'>推动</b>企业<b class='flag-5'>变革</b>的核心驱动力

    信而泰×DeepSeek:AI推理引擎驱动网络智能诊断迈向 “自愈”时代

    模态的技术特性,DeepSeek正加速推动AI在金融、政务、科研及网络智能化等关键领域的深度应用。 信而泰:AI推理引擎赋能网络智能诊断新范式信而泰深度整合DeepSeek-R1大模型
    发表于 07-16 15:29