0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

马里亚纳计划再进一步,OPPO继突破影像后进军音频领域

荷叶塘 来源:电子发烧友网 作者:程文智 2022-12-15 07:10 次阅读

从2019年开始,OPPO组建了芯片开发团队,且将芯片开发项目命名为“马里亚纳计划”,去年的OPPO INNO DAY 2021上,OPPO推出了该计划的首款影像专用NPU芯片--采用6nm工艺的马里亚纳MariSilicon X,在影像领域取得突破,而且目前该芯片的出货量已达千万级。

今年的OPPO INNO DAY 2022上,OPPO的马里亚纳计划再进一步,继在影像领域取得突破后,在音频领域彰显实力,带来了其第二款自研芯片--马里亚纳MariSilicon Y,一款旗舰级蓝牙音频SoC芯片。

f7cf38c8-7c03-11ed-8abf-dac502259ad0.png

为何选择蓝牙音频SoC芯片?

近年来,随着互联网技术的发展,及人们出行的不便,很多娱乐生活开始向线上转移,音乐就是其中之一。据Luminate 2022年上半年报告显示,全球流媒体音乐同比增长了24.7%,而视频流媒体播放增长28.1%。QuestMobile 2022上半年报告也显示,中国移动音乐用户规模已达到庞大的7.06亿。一个明显的趋势就是在线音乐平台的曲库数量在持续增长,比如网易云音乐+腾讯音乐,2021年第一季度的曲库数量为5500万,到2021年底就达到了1.4亿,增速达到150%以上。

而且无损音频,正逐渐走进主流消费者,从小众变为大众,它不再是只限于发烧友群体的稀有体验。随着近年来全球流媒体音乐在线平台加速升级曲库质量,毫无HiFi经验的普通消费者,也可以轻松地获得世界每个角落的高品质音乐。比如,Spotify、Apple Music、Amazon Music、以及国内的网易音乐与腾讯音乐集团旗下的QQ音乐、酷狗、酷我音乐等流媒体平台都在持续更新和丰富最高192kHz/24bit的无损音频。

此外,2019年开始兴起的计算音频开始迈入个性化的第二阶段,高品质的音乐体验不仅意味着清晰度和保真度,还代表用户能够获得个性化的体验。拿计算音频最主要的两个特性主动降噪和空间音频功能来说,个性化的主动降噪是指用户完全可以根据自己所处的环境,选择自己的声音是隔离外界,还是开放通透;而新一代的个性化空间音频则可以根据用户个人的头型和耳廓形状,定制HRTF(Head Related Transfer Function,头部相关传递函数)模型,获得最符合个人的听感。

而随着AI技术、环境感知、自然语义处理等诸多先进技术融入计算音频领域,更具个性化的声音体验也将更容易实现。

可以看得出来,消费者对音频越来越挑剔,也就是说对音频背后的芯片性能需求也越来越高,但大部分的芯片厂商在设计芯片产品的时候,除了考虑产品的性能指标之外,还需要平衡成本及市场需求等因素。他们更希望设计出性能和成本都能为客户所接受的产品,而不是一款极致性能,但成本很高的芯片。“为了让用户获得更好的性能,我们决定自己设计一款高性能蓝牙音频SoC芯片。”OPPO芯片产品高级总监姜波对媒体表示。

马里亚纳Y解决了哪些痛点?

据姜波介绍,马里亚纳 MariSilicon Y具有三大领先的技术:一是通过其高速蓝牙解决方案,集成了比传统蓝牙快400%,最高可达12Mbps的蓝牙速率,加上OPPO自研的URLC无损编解码,实现了192kHz/24bit 无损音频的无线传输;二是集成了NPU模块,最高算力可达590GOPS;三是采用了台积电的N6RF先进制程。

f7f94640-7c03-11ed-8abf-dac502259ad0.png

众所周知,蓝牙的特点就是低功耗和高灵活性,但传输速率一直是其短板,为了解决这个问题,2016年时,蓝牙技术联盟推出了蓝牙5.0标准,将传统的1Mbps PHY(蓝牙物理带宽速率)升级到了2Mbps。目前最新的蓝牙5.3标准中,EDR(Enhanced Data Rate)支持的最大速率为3Mbps。而在真实场景的应用中,因为现实信号环境等复杂因素的影像,理论值最高3Mbps的速率,往往只能发挥一半,也就是1.5Mbps的实际速率。

在姜波看来,这种量级的速度,无法承载无损音频传输的数据量,因为48kHz/24bit无损音频数据量=2.25Mbps;96kHz/24bit无损音频数据量=4.5Mbps;192kHz/24bit无损音频数据量=9Mbps。即使经过优秀的编解码技术压缩至一半的体积,目前蓝牙标准速率最多也只能传输48kHz/24bit的无损音频,对于更高品质的音乐则无能为力。

f80fcdf2-7c03-11ed-8abf-dac502259ad0.png

注:无损压缩按照目前最高50%计算。

据悉,目前SoC平台中集成的蓝牙功能的最高传输速率是6~8Mbps,TWS耳机传输的速率约为3Mbps。这就意味着,虽然人们可以轻松地通过流媒体在线平台获得高品质的音乐内容,但想要听到高品质的音乐,消费者需要使用有线耳机,甚至外置编解码设备来实现高品质音乐的收听。

“由于马里亚纳MariSilicon Y具有12Mbps蓝牙速率,因此可以解决蓝牙速率不够的核心问题,实现192kHz/24bit 无损音频的无线传输。而且还有充足的速率冗余可以承载数据重传,系统开销(system overhead),承载信号控制等,实现整体蓝牙连接质量的大幅提升。”姜波自豪地表示。

另外,OPPO还采用了URLC(Ultra-Resolution Lossless Codec)音频编解码技术,将无损压缩率提升到了50%,相比70%压缩率的FLAC和ALAC,以及60%压缩率的L2HC等无损编码格式压缩率更高,这也意味着同样的无损音频内容,URLC可以压缩至更小体积传输。值得一提的是,URLC编解码支持80Kbps~10Mbps动态码率,相比通用方案,有更大的调节区间,这意味着在充满不确定性的外部环境中,马里亚纳MariSilicon Y可以更精细地调节码率,确保音频传输的流畅性,既不会断连和卡顿,也不会大幅伤害音质。

也就是说,URLC编解码协议配合12Mbps高速蓝牙的设计,让物理硬件和软件编解码技术真正的合二为一,从而让无损音频摆脱了线缆的束缚。

f820474a-7c03-11ed-8abf-dac502259ad0.png

而且,马里亚纳MariSilicon Y还具备不错的兼容性,支持蓝牙5.3和LE Audio的LC3编解码,可以很好地兼容下一代所有支持LE Audio的设备。同时,马里亚纳MariSilicon Y还支持LHDC、LDAC高清编解码,兼容传统OPPO产品和其他品牌产品。此外,马里亚纳MariSilicon Y还兼容传统的SBC和AAC编解码,能够实现对传统蓝牙设备的全面覆盖。

AI方面,马里亚纳MariSilicon Y也展开了探索。当前基于DSP算法非常普遍,也能很好地支持现有的产品,但随着算法复杂度的提升,如果只用DSP,没有NPU,很难达到好的效果。以环境声降噪为例,现在市面上有很多基于DSP的方案,但环境声降噪最后达到的效果水平可能很不一样,当追求不同的效果的时候,要求的算力会越来越高,也许当效果要求达到一定的水平的时候,硬件的能力反而达不到要求。这其中涉及两点:第一是绝对算力,第二是在满足算力要求下功耗的要求。因此,姜波认为,NPU加入音频处理是行业持续发展的趋势。

而马里亚纳MariSilicon Y集成了一个NPU单元,并且算力达到了590 GOPS。与之相比,其内集成的DSP算力则为25 GOPS。姜波指出,就算是DSP的算力也高于行业水平,因为目前全球销量最高的耳机芯片的算力为9 GOPS。

有了NPU的加持,马里亚纳MariSilicon Y可以在音频端侧实现声音分离技术,从而可以实现更“任性”的听音方案,比如,利用声音分离技术,提取人声和噪音,实现更加纯净的通话降噪效果;又如,利用声音分离技术对老电视剧的人物对话进行增强;或者是利用这一技术实现更加随时随地的卡拉OK体验。

在先进制程方面,马里亚纳MariSilicon Y采用了台积电的N6RF制程。目前,全球范围内已应用台积电N6RF先进制程的只有苹果H2芯片、苹果S8芯片中的GPS模块和OPPO的马里亚纳MariSilicon Y芯片。

自研芯片更进一步,OPPO的下一步

从马里亚纳MariSilicon X到马里亚纳MariSilicon Y,OPPO在自研芯片之路上又踏出了坚实的一大步。从前代6nm,到现在的N6RF,代表着OPPO掌握了将先进制程应用于射频系统的能力,拓展了先进制程下的芯片设计专长。

而且相比于第一颗自研芯片是协处理器(Companion Chip)的角色,需要搭配主平台芯片才能使用。马里亚纳MariSilicon Y是OPPO首个SoC芯片解决方案,完整地负责一个蓝牙音频设备的所有功能。这不仅标志着OPPO首次打开了连接芯片设计的新领域,具备了蓝牙连接的软硬件全套能力,也意味着OPPO首次具备计算+连接能力的蓝牙SoC平台设计能力。姜波还特意提到,马里亚纳MariSilicon Y首先应该会应用在耳机端,它也可以用于手机中。

f8391c3e-7c03-11ed-8abf-dac502259ad0.png

正如姜波总结的,通过自研马里亚纳Y,OPPO一是锻炼了芯片研发团队对先进工艺的掌握,尤其是在新工艺出现的时候,能够快速掌握,甚至是优化工艺;二是芯片架构,包括自研芯片的IP架构,比如说马里亚纳MariSilicon Y上的NPU,因为是针对音频的NPU的架构设计,跟视频的NPU的架构设计是完全不一样的,两者的差异非常大;三是基于制程工艺的基础IP的优化,包括核心的NPU如何设计来控制好功耗。

他认为,这三个层面也是在构建团队的时候非常重要的。后端团队是单独的一部分,架构团队也要有很深的理解,另外混合信号团队的经验也很重要。特别是做射频产品,就像是老师傅和手艺人一样,要是靠经验摸索去设计,如果没有这样的积累和积淀是很难做得非常好的。

当然,更重要的,马里亚纳MariSilicon Y 帮助OPPO拓宽了以自研芯片为中轴的垂直整合领域,在前一代自研芯片影像整合的基础上,增加了蓝牙连接的整合,为万物互融奠定必备的底层连接能力。

同时姜波也清楚,自研芯片不会轻而易举,他们早就做好了打一场持久战的准备,“OPPO始终不忘服务用户体验的真诚之心,因为这是做自研芯片的起点,也是自研芯片的最佳终点。OPPO自研芯片不被营收压力所限,不需要像传统芯片厂商过多考量成本,甚至可以不计成本地投入技术研发和芯片堆料,为用户创造真正的惊喜和价值。”

结语

2019年,第一届OPPO未来科技大会上,OPPO创始人兼首席执行官陈明永提出“万物互融”的概念,推动OPPO从手机行业跨入智能物联网行业,并宣布OPPO未来三年投入500亿布局“万物互融”生态研发后,OPPO在三大核心技术,即马里亚纳芯片、潘塔纳尔智慧跨端操作系统、安第斯智能云均取得不错进展。如今,随着安第斯智能云的正式发布,OPPO实现了三大核心技术的布局。

马里亚纳MariSilicon Y的成功推出,代表着OPPO芯片自研能力更进一步,相信马里亚纳MariSilicon X和马里亚纳MariSilicon Y只是OPPO自研芯片的起步,未来还会有更多垂直整合,兼顾用户价值的芯片出现。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • OPPO
    +关注

    关注

    20

    文章

    5146

    浏览量

    77312

原文标题:马里亚纳计划再进一步,OPPO继突破影像后进军音频领域

文章出处:【微信号:elecfans,微信公众号:电子发烧友网】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    富特科技创业板IPO再进一步

    证监会已正式批复浙江富特科技股份有限公司首次公开发行股票注册的申请,标志着富特科技即将在深交所创业板挂牌上市,迎来全新的发展阶段。
    的头像 发表于 03-22 15:01 516次阅读

    英飞凌重组销售与营销组织,进一步提升以客户为中心的服务及领先的应用支持能力

    团队将围绕三个以客户为中心的业务领域进行组织和重建:“汽车业务”、“工业与基础设施业务”以及“消费、计算与通讯业务”。分销商和电子制造服务管理(DEM)销售组织将继续负责分销商和电子制造服务(EMS)领域。新的组织结构将以客户的应用需求为中心,
    发表于 03-01 16:31 117次阅读
      英飞凌重组销售与营销组织,<b class='flag-5'>进一步</b>提升以客户为中心的服务及领先的应用支持能力

    大族封测IPO进程再进一步

    2024年1月17日,深交所向大族封测发出IPO审核意见,标志着这家LED及半导体封测专用设备制造商的上市进程又向前迈进了一步
    的头像 发表于 01-25 14:51 357次阅读

    有什么方法可以进一步提高AD7714的分辨率啊?

    级放大再加给AD7714时,测得人分辨率还要低些。由于是用干电池得到AD7714的输入信号,该信号相对来说很稳定,而且板上的噪声也不是太大。请问各位大虾,还有什么方法可以进一步提高AD7714的分辨率啊?不胜感激!
    发表于 12-25 06:33

    借助人工智能,存储器比重将进一步增加

    SK海力士预测在人工智能(AI)领域,存储器解决方案的比重将进一步增加,可以通过类似AiMX的解决方案部分替代图形处理单元(GPU)。
    发表于 12-04 09:52 189次阅读
    借助人工智能,存储器比重将<b class='flag-5'>进一步</b>增加

    ad9106如何将波形频率设置为进一步降低到10Hz?

    你好,我有个小问题。我使用100m时钟芯片。每个时钟只有10ns,ad9106寄存器的最小输出波形只有100Hz。如何将波形频率设置为进一步降低到10Hz?我已将配置设置为相关寄存器的最大值。拍
    发表于 12-01 06:12

    请问如何进一步减小DTC控制系统的转矩脉动?

    如何进一步减小DTC控制系统的转矩脉动?
    发表于 10-18 06:53

    STM8在待机模式如何进一步降低功耗?

    有什么方法可以进一步降低待机模式的功耗
    发表于 10-12 07:23

    复合集流体产业化进程进一步提速

    复合集流体产业化进程进一步提速。
    的头像 发表于 09-21 09:52 874次阅读
    复合集流体产业化进程<b class='flag-5'>进一步</b>提速

    突发!OPPO或重启芯片设计

    OPPO 称,面对全球经济、手机市场的不确定性,经过慎重考虑,公司决定终止 ZEKU 业务。“这是一个艰难的决定,我们会妥善处理相关事宜,并将一如既往做好产品,持续创造价值。”在此之前,OPPO 已推出两款马里亚纳芯片产品 ——
    的头像 发表于 09-20 17:26 671次阅读

    全面继承OPPO旗舰影像算法,一加 Ace 2 Pro 让旗舰影像能力更进一步

    ,让旗舰影像能力更进一步。一加中国区总裁李杰表示:“拍照一定是用户使用一部手机最频繁和最重要用到的功能之一,所以在主打性能的旗舰上,一加也坚决搭载旗舰级的影像配置。” 旗舰级的影像配置
    的头像 发表于 08-14 14:23 534次阅读

    OPPO放弃自研芯片,终止哲库业务

    有消息称“OPPO放弃自研芯片”的消息开始流传。细心的网友发现,OPPO的自研影像芯片“马里亚纳X”、“马里亚纳Y”已经下线,相关官方页面也
    的头像 发表于 06-02 17:14 1664次阅读

    RISC-V CPU启动进一步分析(1)#操作系统

    操作系统
    学习硬声知识
    发布于 :2023年06月01日 13:44:34

    系统调用的进一步讲解(2)#操作系统

    操作系统
    学习硬声知识
    发布于 :2023年05月19日 19:44:11

    求分享使用SMB的GSM模块进行IVRS设计的信息

    库和语言选择等。 我的计划选择 1 为英语 2 为印地语(当地语言),然后进一步 1 为 x 部门,2 为 y 部门等
    发表于 05-19 07:17