0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

高通支持Meta Llama 3大语言模型在骁龙旗舰平台上实现终端侧执行

高通中国 来源:高通中国 2024-04-20 09:13 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

要点

高通和Meta合作优化Meta Llama 3大语言模型,支持在未来的骁龙旗舰平台上实现终端侧执行。

开发者将能够访问高通AI Hub中的资源和工具,以实现在骁龙平台上优化运行Llama 3,从而缩短产品上市时间并充分发挥终端侧AI的优势。

•高通技术公司的终端侧AI能力包括行业领先的NPU、CPUGPU技术组合,赋能生成式AI应用实现即时性、增强的可靠性、隐私性、情境感知个性化和成本效益。

今日,高通技术公司和Meta宣布合作,以优化Meta Llama 3大语言模型(LLM)直接在智能手机、PC、VR/AR头显和汽车等终端上的执行。在终端侧运行Llama 3具有显著优势,包括出色的响应能力、增强的隐私性和可靠性,以及为用户带来更加个性化的体验。

高通技术公司高级副总裁兼技术规划和边缘解决方案业务总经理马德嘉(Durga Malladi)表示:

我们赞赏Meta针对Meta Llama 3的开放策略,高通和Meta都致力于赋能开发者,激发AI创新。高通的终端侧AI领导力,结合跨不同边缘终端的广泛市场布局,使我们能够在全球范围内扩大Llama生态系统优势,赋能客户、合作伙伴和开发者打造新一代开创性AI体验。

此次合作旨在赋能OEM厂商和开发者,在搭载未来旗舰骁龙平台的终端上支持Llama 3,推动生成式AI功能的普及。高通技术公司强大的异构计算能够无缝利用行业领先的CPU、GPU和NPU处理器,并结合先进的内存架构,赋能客户、合作伙伴和开发者实现最佳应用性能、能效和电池续航。

开发者可通过高通AI Hub访问相关资源和工具,以实现在骁龙平台上优化运行Llama 3。高通AI Hub目前可提供约100个优化AI模型,能够为开发者缩短产品上市时间,并使他们的应用能够发挥终端侧AI的优势。

高通技术公司和Meta致力于驱动创新,打造下一代AI体验。此次合作是双方持续合作关系的重要里程碑,彰显了双方以强大AI能力赋能开发者和用户的不懈努力。



审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 处理器
    +关注

    关注

    68

    文章

    20378

    浏览量

    255600
  • 高通
    +关注

    关注

    78

    文章

    7761

    浏览量

    200585
  • GPU芯片
    +关注

    关注

    1

    文章

    308

    浏览量

    6579
  • 大模型
    +关注

    关注

    2

    文章

    3863

    浏览量

    5295

原文标题:高通支持Meta Llama 3在骁龙终端上运行

文章出处:【微信号:Qualcomm_China,微信公众号:高通中国】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    通推出两款全新第五代移动平台

    通技术公司宣布推出第五代 6移动平台和第五代 4移动
    的头像 发表于 05-13 09:11 574次阅读

    全球首批搭载双Snapdragon Ride平台至尊版的零跑D19上市开售

    车型,零跑D19依托双8797卓越的计算性能与强大的终端AI能力,打造了行业领先的五屏联动车内三维空间体验,以及智能座舱端AI大
    的头像 发表于 04-21 14:33 494次阅读

    意法半导体全面支持可穿戴平台至尊版

    意法半导体(ST)近日宣布,ST现已支持通技术公司最新推出的个人AI平台——可穿戴平台至尊
    的头像 发表于 03-23 10:11 420次阅读

    通推出全新可穿戴平台至尊版

    通技术公司今日宣布推出可穿戴平台至尊版,这是一款个人AI平台,为解锁下一代真正实现个性化、
    的头像 发表于 03-04 09:31 990次阅读

    通推出可穿戴平台至尊版,支持20亿参数大模型

    电子发烧友网报道 3月2日,2026世界移动通信大会(MWC 2026)上,通正式发布了全新可穿戴
    的头像 发表于 03-03 14:36 7590次阅读
    <b class='flag-5'>高</b>通推出<b class='flag-5'>骁</b><b class='flag-5'>龙</b>可穿戴<b class='flag-5'>平台</b>至尊版,<b class='flag-5'>支持</b>20亿参数大<b class='flag-5'>模型</b>

    通推出第五代8至尊版移动平台for Galaxy

    通技术公司今日宣布推出迄今为止最先进的 移动平台——第五代 8至尊版移动
    的头像 发表于 02-28 14:00 1303次阅读

    如何在Arm Neoverse N2平台上提升llama.cpp扩展性能

    跨 NUMA 内存访问可能会限制 llama.cpp Arm Neoverse 平台上的扩展能力。本文将为你详细分析这一问题,并通过引入原型验证补丁来加以解决。测试结果表明,基于
    的头像 发表于 02-11 10:06 393次阅读

    CPU暴涨36%,AI性能飙升46%!通第五代8发布,一加首发

    11月26日,北京发布8系全新成员——第五代8移动
    的头像 发表于 11-27 12:50 1.3w次阅读
    CPU暴涨36%,AI性能飙升46%!<b class='flag-5'>高</b>通第五代<b class='flag-5'>骁</b><b class='flag-5'>龙</b>8发布,一加首发

    虹软携手通铸就移动智能终端视频画质新基准

    了全新一代旗舰移动平台 —— 第五代8至尊版(Snapdragon 8 Elite Gen 5),该平台
    的头像 发表于 10-09 17:59 1604次阅读

    旗舰移动平台新成员第五代8至尊版即将于2025峰会发布

    • 第五代8至尊版是我们旗舰移动平台产品家族中的最新成员。 • “至尊版”的命名专属于我们最具行业领先性的产品,也就是功能、体验和创新
    的头像 发表于 09-15 10:58 5408次阅读

    【VisionFive 2单板计算机试用体验】3、开源大语言模型部署

    1、ollama平台搭建 ollama可以快速地部署开源大模型,网址为https://ollama.com, 试用该平台,可以平台上部署
    发表于 07-19 15:45

    三星Galaxy Z Fold7搭载8至尊版移动平台

    今日,通技术公司宣布 8至尊版移动平台(for Galaxy)将在全球范围为三星Galaxy Z Fold7提供支持
    的头像 发表于 07-14 15:14 1813次阅读

    通展示数字底盘产品组合的最新成果

    今日,2025通汽车技术与合作峰会上,通技术公司携手中国先进车企和生态系统合作伙伴,展示其数字底盘产品组合的发展势头和最新成果。
    的头像 发表于 07-03 12:55 1995次阅读

    使用 NPU 插件对量化的 Llama 3.1 8b 模型进行推理时出现“从 __Int64 转换为无符号 int 的错误”,怎么解决?

    安装了 OpenVINO™ GenAI 2024.4。 使用以下命令量化 Llama 3.1 8B 模型: optimum-cli export openvino -m meta-llama
    发表于 06-25 07:20

    通放大招!AR1+Gen1发布,10亿端小型语言模型塞进眼镜

    电子发烧友网报道(文/莫婷婷)时隔两年,通终于升级AR1平台,正式推出全新AR1+ G
    的头像 发表于 06-14 00:41 9513次阅读
    <b class='flag-5'>高</b>通放大招!<b class='flag-5'>骁</b><b class='flag-5'>龙</b>AR1+Gen1发布,10亿端<b class='flag-5'>侧</b>小型<b class='flag-5'>语言</b><b class='flag-5'>模型</b>塞进眼镜