0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

联发科创新技术加速AI生态布局,天玑9300重新定义AI移动体验

科技快报 来源:科技快报 作者:科技快报 2023-11-10 14:37 次阅读

全新一代的旗舰级5G生成式AI移动芯片天玑9300已由联发科发布,其独特的全大核架构设计,结合新一代AI处理器APU和联发科的先进技术,为生成式AI应用提供强劲的性能,给用户带来精彩纷呈的生成式AI体验。此外,联发科还与众多AI公司进行深度合作,共同构建了在移动环境中的AI生态。

wKgaomVNz7WAAUPXAAQ3TenYVuU999.png

全新第七代AI处理器APU 790,为生成式AI而生

随着用户对生成式AI应用需求日益增长,端侧生成式AI便捷、安全性等优势便凸显出来。当然,部署端侧AI大语言模型需要强大的AI算力支撑。

天玑9300搭载联发科第七代AI处理器APU 790,为生成式AI而设计,拥有硬件级的生成式AI引擎,可以实现更加高速且安全的边缘AI计算,深度适配Transformer模型进行算子加速,速度是上一代的8倍。

wKgZomVNz7WAdfNmAACAKjC3qno56.jpeg

同时APU 790的性能和能效得到显著提升,整数运算和浮点运算能力提升至前一代的2倍,苏黎世ETHZv5.1 AI-Benchmark Mobile Soc跑分2109 分,AI性能成功霸榜,功耗更是降低了45%。在强大的AI性能支持下,1秒以内即可生成图片。天玑9300强悍的AI算力、创新的全大核CPU架构和Immortalis-G720 GPU都为端侧运行生成式AI打下坚实的性能基础。

wKgaomVNz7WAb2tCAADeRBHfMik368.png

同时,基于亿级参数大语言模型的特性,联发科开发了混合精度 INT4 量化技术,结合联发科特有的内存硬件压缩技术NeuroPilot Compression,可以更高效地利用内存带宽,大幅减少AI大模型占用终端内存,为端侧运行AI大语言模型突破手机内存限制,助力更大参数模型在端侧落地。

基于以上,天玑9300首次在vivo旗舰手机端侧落地70亿参数AI大语言模型,处理速度可达20 Tokens每秒。不仅如此,联发科突破了行业极限,已经与vivo成功在端侧运行了130亿参数的大语言模型。甚至,天玑9300已率先实现在移动芯片上成功运行330亿参数的AI大语言模型,领跑业界。

wKgZomVNz7aADOArAAPPtwbJuWc067.png

天玑9300还支持多模态生成式AI大模型,打造出“文生诗”“文生图”“文生趣图”等丰富有趣的端侧体验。

wKgaomVNz7aAKzI3AAGaCv5Plyo389.png

可见,天玑9300的AI算力和端侧生成式AI能力已领先行业,足以让用户随时随地AI创造力全飙。

生成式AI模型端侧技能扩充,带来全面、丰富的端侧生成式AI体验

与云侧生成式AI解决方案不同,由于硬件环境的差异,部署端侧生成式AI也需要考虑手机内存、存储容量、负载上限等因素。为此,联发科率先提出了先进的解决方案。

APU 790 支持生成式AI模型端侧技能扩充技术NeuroPilot Fusion,它可以基于基础大模型持续在端侧进行低秩自适应(LoRA,Low-Rank Adaptation)融合,在混合式AI的赋能下,可以基于1个基础大模型,通过云端训练,在端侧完成N个功能的融合,赋予基础大模型更全面、更丰富的生成式AI应用能力。

wKgZomVNz7aAKSZYAABaWKSYnzQ697.png

比如基于AI模型端侧技能扩充技术的“图生GIF动图”功能,用户可以根据一张照片更换不同的风格甚至表情,玩出个人专属风格的表情包,秒变表情包小达人。

wKgaomVNz7eALNt1AACRrudsS3I35.jpeg

AI开发平台NeuroPilot加速端侧生成式AI生态布局

基于强大的AI算力和先进的内存硬件压缩技术、AI模型端侧技能扩充等技术,天玑9300的APU 790将端侧生成式AI的速度和广度提升到了全新的水平。同时,为加速生成式AI在端侧部署和普及,联发科也凭借其AI开发平台NeuroPilot构建了丰富的AI生态,从底层硬件到工具链、模型中心以及开发生态,助力生态快速、高效地部署端侧生成式AI应用。

wKgZomVNz7eAJrk7AAFtyqnYvf411.jpeg

AI开发平台NeuroPilot支持Android、Meta LIama 2、百度文心一言大模型、百川智能百川大模型等前沿主流AI大模型。

wKgaomVNz7eAat6bAAA8z6By0Gs601.png

更为重要的是,NeuroPilot拥有一套完整且先进的工具链,除了NeuroPilot Compression低秩自适应融合,还有Speculative Decoding推测解码加速和模型优化与转化技术。

wKgZomVNz7eAIcNqAADSWumX36o81.jpeg

联发科的天玑开发者中心还可提供端侧生成式AI落地一站式开发者资源,分享端侧模型部署案例提升开发效率。目前已有20多个生成式AI合作伙伴加入生态共建。

联发科还携手业界合同伙伴打造精彩的生成式AI应用体验。虹软的生成式AI超级分辨率技术基于天玑9300 APU 边缘计算能力,相比前代,性能可提升30%。在25倍放大的拍摄时,利用生成式AI超级分辨率技术,可以拍出细节更真实的图像效果。

wKgaomVNz7iANVhKAABQdQkk4sE535.png

极感科技的生成式AI语意搜索技术也基于天玑9300 APU边缘计算能力,对比前代,性能可提升260%。比如在手机的相册中搜索照片,描述照片的内容即可在毫秒内精准搜到对应的照片。而且在断网状态下也能搜索,隐私也不会泄露。

Morpho的视频通话实时数字分身生成技术,同样基于天玑9300 APU边缘计算能力,对比前代,性能提升26%。一般的虚拟人像生成器需手动选取容貌样式花费时间。但基于视频通话实时数字分身生成技术,用户操作容易,仅需打开摄像头单帧图片即可瞬间生成数字分身。

基于天玑9300 APU边缘计算能力,慧鲤生成式AI防眩光技术性能可提升60%。在此技术加持下,无论是室外还是室内,在拍摄时如有眩光,只要轻松一暗即可消除眩光干扰。

可以看到,在AI端云融合的趋势下,天玑9300在AI算力、生成式AI用户体验和生态方面展现出全面的优势,为新一代旗舰级端侧生成式AI体验树立了新的标杆,强大生成式AI就要用天玑。

wKgZomVNz76AckBEAAQBOXjl-Yk662.png

与此同时,以联发科为典型的生成式AI领先者们正携手并进,通过不间断的技术创新和周全的生态布局来推进混合式AI计算,为端侧生成式AI部署找出一条独特且高效的道路,全力以赴的推广生成式AI在端侧应用,旨在让更多普通用户享受到个性化的端侧AI体验,进而构建出全场景智能新体验,让科技的益处触及更大的民众。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 手机
    +关注

    关注

    34

    文章

    6684

    浏览量

    154967
  • AI
    AI
    +关注

    关注

    87

    文章

    26443

    浏览量

    264045
  • 天玑9000
    +关注

    关注

    1

    文章

    46

    浏览量

    4497
收藏 人收藏

    评论

    相关推荐

    1200双5G

    芯片
    jf_87063710
    发布于 :2024年03月21日 10:28:02

    墨芯人工智能CEO王维:需要重新定义和设计AI计算机

    AI时代,我们需要重新定义和设计AI计算机。仅依靠硅基的摩尔定律,2年翻一倍的线性增长的算力供给远不能满足指数级增长的需求问题。
    的头像 发表于 01-12 11:12 647次阅读

    MT6877( 900)平台 —— XY6877 5G AI 智能模块

    模块
    jf_87063710
    发布于 :2024年01月12日 09:37:42

    5G AI 智能芯片—XY6877

    智能芯片
    jf_87063710
    发布于 :2024年01月03日 10:12:51

    AI重新定义PC体验

    我们正在进入生成式AI时代。 生成式AI 将利用神经网络赋能全新体验和应用场景,这是一个巨大飞跃,但仅依靠云端是无法高效实现的。生成式AI将通过打造全新品类的高性能、高能效AI PC变
    的头像 发表于 12-06 10:15 274次阅读
    <b class='flag-5'>AI</b><b class='flag-5'>重新定义</b>PC体验

    强悍全大核重新定义游戏体验!天玑9300就是旗舰标杆

     00的全大核CPU架构设计,带来性能、能效的全面升级,同时这次还在游戏技术和游戏生态方面带来了不少惊喜。通过在硬件、软件、生态等多方面的大力投入,联发科已成功地将天玑9300打造为手
    的头像 发表于 11-10 15:10 318次阅读
    强悍全大核<b class='flag-5'>重新定义</b>游戏体验!天玑<b class='flag-5'>9300</b>就是旗舰标杆

    天玑9300内存硬件压缩技术大幅降低手机AI大模型内存占用 行业第一

    近期,联发科发布了全新一代旗舰级5G生成式AI移动芯片天玑9300创新的全大核架构设计结合新一代AI处理器APU和联发科特有的前沿
    的头像 发表于 11-09 19:17 437次阅读
    天玑<b class='flag-5'>9300</b>内存硬件压缩<b class='flag-5'>技术</b>大幅降低手机<b class='flag-5'>AI</b>大模型内存占用 行业第一

    联发科天玑9300最高可运行330亿参数AI大模型

    联发科天玑9300最高可运行330亿参数AI大模型 联发科这个是要把AI大模型带到手机端的节奏吗?联发科正式发布了天玑9300旗舰5G生成式AI
    的头像 发表于 11-07 19:00 1093次阅读

    技术生态赢未来,第二届OpenHarmony技术大会圆满举行

    ,OpenHarmony一直聚焦技术创新,持续迭代升级技术版本,并通过开源生态共建,不断提升数字经济“根技术”在万物智时代的影响力,让Op
    发表于 11-04 14:59

    高层访谈 | 收购一周年:瑞萨通过Reality AI软件重新定义AI解决方案组合

    Mohammed Dogar VP, Global Business Development and Ecosystem 在完成收购一年后,瑞萨通过Reality AI软件重新定义AI解决方案组合
    的头像 发表于 11-02 18:10 269次阅读
    高层访谈 | 收购一周年:瑞萨通过Reality <b class='flag-5'>AI</b>软件<b class='flag-5'>重新定义</b><b class='flag-5'>AI</b>解决方案组合

    8788WA-F MTK 4G AI核心板

    核心板
    jf_87063710
    发布于 :2023年10月07日 09:43:24

    AI重新定义Intel

    英特尔公司首席执行官帕特·基辛格(Pat Gelsinger)在开幕主题演讲上表示:“AI代表着新时代的到来。AI正在催生全球增长的新时代,在新时代中,算力起着更为重要的作用,让所有人迎来更美好的未来。
    的头像 发表于 09-22 16:42 711次阅读

    生态伙伴 | 华秋硬创联合湾加速,共同加速企业发展

    ,获2轮及以上融资的企业占比达54%。 02 生态伙伴介绍:湾加速加速是领先的创业加速器,聚焦科技创新,立足于粤港澳大湾区,面向全球整合
    发表于 06-16 16:00

    NVIDIA仍不死心,再次加入ARM站场

    Ampere架构的图形技术应用于MT819x SoC上。虽然至今也没有看到成品,不过并不代表双方没有推进这方面的工作。 据Digitimes报道,英伟达仍心系移动市场,将与
    发表于 05-28 08:51

    回应结盟英伟达合攻 Arm 架构芯片传闻

    计划周一下午举行 2023“旗舰科技 智领未来”记者会,由 CEO 蔡力行与重量级嘉
    发表于 05-28 08:47