0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

高通支持Meta Llama 3大语言模型在骁龙旗舰平台上实现终端侧执行

高通中国 来源:高通中国 2024-04-20 09:13 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

要点

高通和Meta合作优化Meta Llama 3大语言模型,支持在未来的骁龙旗舰平台上实现终端侧执行。

开发者将能够访问高通AI Hub中的资源和工具,以实现在骁龙平台上优化运行Llama 3,从而缩短产品上市时间并充分发挥终端侧AI的优势。

•高通技术公司的终端侧AI能力包括行业领先的NPU、CPUGPU技术组合,赋能生成式AI应用实现即时性、增强的可靠性、隐私性、情境感知个性化和成本效益。

今日,高通技术公司和Meta宣布合作,以优化Meta Llama 3大语言模型(LLM)直接在智能手机、PC、VR/AR头显和汽车等终端上的执行。在终端侧运行Llama 3具有显著优势,包括出色的响应能力、增强的隐私性和可靠性,以及为用户带来更加个性化的体验。

高通技术公司高级副总裁兼技术规划和边缘解决方案业务总经理马德嘉(Durga Malladi)表示:

我们赞赏Meta针对Meta Llama 3的开放策略,高通和Meta都致力于赋能开发者,激发AI创新。高通的终端侧AI领导力,结合跨不同边缘终端的广泛市场布局,使我们能够在全球范围内扩大Llama生态系统优势,赋能客户、合作伙伴和开发者打造新一代开创性AI体验。

此次合作旨在赋能OEM厂商和开发者,在搭载未来旗舰骁龙平台的终端上支持Llama 3,推动生成式AI功能的普及。高通技术公司强大的异构计算能够无缝利用行业领先的CPU、GPU和NPU处理器,并结合先进的内存架构,赋能客户、合作伙伴和开发者实现最佳应用性能、能效和电池续航。

开发者可通过高通AI Hub访问相关资源和工具,以实现在骁龙平台上优化运行Llama 3。高通AI Hub目前可提供约100个优化AI模型,能够为开发者缩短产品上市时间,并使他们的应用能够发挥终端侧AI的优势。

高通技术公司和Meta致力于驱动创新,打造下一代AI体验。此次合作是双方持续合作关系的重要里程碑,彰显了双方以强大AI能力赋能开发者和用户的不懈努力。



审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 处理器
    +关注

    关注

    68

    文章

    20148

    浏览量

    247151
  • 高通
    +关注

    关注

    78

    文章

    7682

    浏览量

    198647
  • GPU芯片
    +关注

    关注

    1

    文章

    306

    浏览量

    6398
  • 大模型
    +关注

    关注

    2

    文章

    3440

    浏览量

    4967

原文标题:高通支持Meta Llama 3在骁龙终端上运行

文章出处:【微信号:Qualcomm_China,微信公众号:高通中国】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    旗舰移动平台新成员第五代8至尊版即将于2025峰会发布

    • 第五代8至尊版是我们旗舰移动平台产品家族中的最新成员。 • “至尊版”的命名专属于我们最具行业领先性的产品,也就是功能、体验和创新
    的头像 发表于 09-15 10:58 4007次阅读

    【VisionFive 2单板计算机试用体验】3、开源大语言模型部署

    1、ollama平台搭建 ollama可以快速地部署开源大模型,网址为https://ollama.com, 试用该平台,可以平台上部署
    发表于 07-19 15:45

    三星Galaxy Z Fold7搭载8至尊版移动平台

    今日,通技术公司宣布 8至尊版移动平台(for Galaxy)将在全球范围为三星Galaxy Z Fold7提供支持
    的头像 发表于 07-14 15:14 1085次阅读

    通展示数字底盘产品组合的最新成果

    今日,2025通汽车技术与合作峰会上,通技术公司携手中国先进车企和生态系统合作伙伴,展示其数字底盘产品组合的发展势头和最新成果。
    的头像 发表于 07-03 12:55 1105次阅读

    使用 NPU 插件对量化的 Llama 3.1 8b 模型进行推理时出现“从 __Int64 转换为无符号 int 的错误”,怎么解决?

    安装了 OpenVINO™ GenAI 2024.4。 使用以下命令量化 Llama 3.1 8B 模型: optimum-cli export openvino -m meta-llama
    发表于 06-25 07:20

    通推出第四代7移动平台

    Elite Gaming特性尽享紧张刺激的游戏体验,第四代7极具吸引力的出色功能让用户能够全身心沉浸所爱。第四代7还带来了创新的AI功能,
    的头像 发表于 05-19 15:02 1612次阅读

    通推出第四代8s移动平台

    今日,通技术公司宣布推出第四代8s移动平台,该平台专为追求出色娱乐体验和创作体验的用户打造,旨在将
    的头像 发表于 04-03 17:44 1629次阅读

    8至尊版移动平台革新终端AI影像体验

    自智能手机时代以来,人们对于手机摄影的专业追求从未停歇。凭借前沿的影像和终端AI技术,持续引领移动计算摄影发展。最新的
    的头像 发表于 03-31 11:09 1599次阅读

    无法OVMS上运行来自Meta的大型语言模型 (LLM),为什么?

    无法 OVMS 上运行来自 Meta 的大型语言模型 (LLM),例如 LLaMa2。 从 OVMS GitHub* 存储库运行
    发表于 03-05 08:07

    华硕发布两款搭载X平台的全新AI PC

    近日,华硕正式发布了两款搭载X平台的全新AI PC——华硕无畏14 AI版与灵耀14 Air版。凭借
    的头像 发表于 02-24 15:44 1068次阅读

    通发布全新6 Gen 4移动平台

    近日,通公司正式推出了其全新的移动平台——6 Gen 4,官方中文命名为“第四代6”。
    的头像 发表于 02-13 10:03 4766次阅读

    通推出®8至尊版移动平台

    智能手机提供强大的性能支持8至尊版(for Galaxy)集成了第二代定制通Oryon™ CPU,这颗CPU以其卓越的性能表现,被誉为全球最快的移动处理器之一。此外,该
    的头像 发表于 01-23 16:10 3096次阅读

    通推出8至尊版

    终端AI能力再次实现突破,为用户带来全面焕新的AI影像体验。 AI全面赋能,影像实力再进阶 影像处理能力上,
    的头像 发表于 12-23 13:38 2214次阅读
    <b class='flag-5'>高</b>通推出<b class='flag-5'>骁</b><b class='flag-5'>龙</b>8至尊版

    Meta重磅发布Llama 3.3 70B:开源AI模型的新里程碑

    人工智能领域,Meta的最新动作再次引起了全球的关注。今天,我们见证了Meta发布的 Llama 3.3 70B 模型,这是一个开源的人
    的头像 发表于 12-18 16:46 880次阅读
    <b class='flag-5'>Meta</b>重磅发布<b class='flag-5'>Llama</b> 3.3 70B:开源AI<b class='flag-5'>模型</b>的新里程碑

    Meta推出Llama 3.3 70B,AI大模型竞争白热化

    今年的AI领域,Meta也不甘落后,推出了其压轴之作——Llama 3.3 70B大模型。与此同时,马斯克的xAI也宣布其Grok模型从今
    的头像 发表于 12-09 14:50 1015次阅读