0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

智能硬件 | XR头显市场只有少数玩家,AI是扭转局面的关键?

芯查查 来源:芯查查 作者:芯查查 2024-03-18 16:58 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

苹果头显设备Vision Pro突出2项技术,即“空间计算”和手部、眼部跟踪。“空间计算”使设备能够学习并与物理环境进行交互;手部和眼部跟踪功能通过从设备侧面、前置和底部安装的摄像头收集手部和眼球的感应数据,使用户能够操作虚拟环境并与之交互。目前来看,苹果头显产品没有进一步推动XR市场,但不可否认的是其产品的先进性。下面全面对比现有的XR终端和芯片,并说明生成式AI对XR行业的影响。

微软在大模型方面具有优势,XR终端和芯片供应商屈指可数

微软是较早进入头显市场的厂商之一,2015年便推出头显产品HoloLens。微软还与OpenAI建立了独家合作伙伴关系,使其可将OpenAI公司的GPT-4大模型引入生产力相关的软件和云服务,例如微软于2022年在GitHub开发了Copilot,2023在操作系统和办公软件中融入了Copilot,而背后是GPT大模型提供支持。

苹果正在开发自己的大模型,使用2000亿参数训练。作为对比,OpenAI的GPT 3.5大模型有175亿参数,GPT-4大模型超过1万亿个参数。谷歌的大模型Switch和PaLM2分别为1.6万亿和3.4千亿参数。NVIDIA和百度的LLM也具有更大参数,分别为5.3千亿参数和2.6千亿参数。与竞争对手相比,苹果的大模型规模相形见绌。

过去2年,大模型越来越大推动计算能力需求增长,预计微软将GPT-4与其产品、服务融合,具有更强的产品竞争力。大模型还将持续迭代,比如OpenAI已经在开发其GPT-5模型,而谷歌发布了新的Gemini大模型。

wKgZomX4AiqAbRCfAABrQnx2frQ48.webp

图注:主流大模型LLM对比

1. 终端产品

苹果在2023年拥有20亿设备总安装量,活跃iPhone用户群达到1.46亿,Vision Pro可以利用苹果的庞大客户群。苹果另一个优势是其生态系统,使得苹果手机、PC、穿戴设备产品之间无缝连接,并允许用户访问许多苹果的应用程序。

在定价能力上,对包括苹果在内的主流头显公司(Meta、索尼、PICO和微软)的计算平均价格,苹果头显的价格明显高于平均水平(1,710美元),鉴于其品牌价值,其产品溢价不足为奇。

从功能和硬件规格来看,苹果Vision Pro的优势之一是显示质量,像素为2300万像素,领先于其竞争对手,Vision Pro采用的Micro-OLED屏幕提供比大多数VR中的液晶显示器更高的分辨率和更清晰的对比度。

wKgaomX4AiqAMnW1AAEQ4h2BduA54.webp

图注:各品牌XR头显的功能和硬件对比然而,Vision Pro在刷新率方面存在不足,最高刷新率为100Hz,而除PICO外的大多数竞争对手支持120Hz。此外,Vision Pro电池寿命与Meta和PICO并列,但落后于索尼和微软。Vision Pro配备了更多摄像头和传感器,包括12个摄像头、6个麦克风和5个传感器,用于高级跟踪和交互,以及更宽的视野。不过,Vision Pro比其竞争对手略重。

2. 芯片

对比XR设备使用的芯片,苹果是唯一一家使用自己的芯片(M2和R2)的公司,而Meta、PICO和微软则使用高通的Snapdragon芯片(XR2和850)。索尼的PS VR头显是唯一一款采用定制联发科芯片的设备。

wKgZomX4AiuABE-aAAB7rGWDxNw97.webp

图注:各品牌XR头显使用的芯片由于联发科定制芯片没有公开披露性能,下面进一步对比骁龙和M2芯片。

高通的骁龙XR2芯片是专门为XR头显应用设计的,被多个头显设备采用。苹果M2采用5nm光刻技术,具有20MB缓存和10核GPU,主频为1398MHz,在图形处理能力方面超过高通骁龙XR2 5G和骁龙850,拥有3578 GFLOPS、GPU FP32浮点运算能力。M2在Geekbench基准测试上也表现出色,在平均单核(4223)和多核(18170)性能方面均有较好的测试结果。

wKgaomX4AiuAbqCOAAC27qXQWh868.webp

图注:苹果M2芯片和高通骁龙XR2、骁龙850芯片性能对比

生成式AI对XR的赋能

生成式AI在XR头显中的应用主要聚焦在3D内容创作和虚拟体验优化。下一代AI渲染工具将赋能内容创作者使用如文本、语音、图像或视频等各种类型的提示,生成3D物体和场景,并最终创造出完整的虚拟世界。此外,内容创作者将能够利用文本生成文本的大语言模型,为能够发出声音并表达情绪的“虚拟化身”生成类人对话。

这些功能有助于生成逼真的视觉效果,增强 XR头显呈现的真实感和沉浸感。此外,生成式AI算法可以不断从用户交互和反馈中学习,以随着时间的推移改进内容生成、个性化和适应,这种自适应学习过程确保了XR体验不断发展,并变得更加适合个人用户的偏好和行为。

wKgZomX4AiyAOdjGAADKAN7GvLU32.webp

图注:生成式AI在XR头显的应用包括对话式AI、AI渲染(图源:高通)

XR头显的市场前景

根据KHAVEEN的数据,XR市场目前由Meta引领,在2023年第三季度的市场份额最高,为49%,其次是索尼推出的PlayStation VR2,微软包含在“其他”里面。

wKgaomX4AiyAQxtDAABXBOKYE-c55.webp

图注:全球XR头显按品牌划分的出货量对比(图源:KHAVEEN)

另外,根据IDC、Counterpoint Research、Mordor Intelligence、Frost & Sullivan和Precedence Research的数据,平均预测XR市场复合年增长率为42.24%。

wKgZomX4AiyAYebWAACDYB6n0dE60.webp

图注:各市场研究机构对XR市场的预测XR市场的消费者驱动力包括娱乐,如(游戏、电影和电视节目)、虚拟购物、虚拟旅行和虚拟体育;企业级应用的驱动力来源于制造(工业设计和建模、远程工厂监控)、医疗保健(VR医疗、低强度医疗手术)和零售(增强的员工培训)。

小 结

AR/VR的企业级和消费电子应用并不是新兴事物,但直到现在,包括生成式AI、计算机视觉人工智能技术的进步,才允许轻量级XR终端设备提供逼真的沉浸感、自然的交互性等使用体验。尽管XR头显的用户群体目前仍然不大,但是随着AI技术在XR头显终端的应用持续深化,或将成为改变行业现状的关键。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    463

    文章

    54686

    浏览量

    471242
  • AI
    AI
    +关注

    关注

    91

    文章

    42158

    浏览量

    303145
  • XR
    XR
    +关注

    关注

    0

    文章

    417

    浏览量

    10543
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    奥拓电子AI+XR虚拟拍摄解决方案出海中东市场

    近日,奥拓电子于迪拜办事处举办产品技术交流会,正式向中东及北非市场发布并现场演示了旗下两款融合AI+XR的虚拟拍摄解决方案。
    的头像 发表于 02-03 14:51 773次阅读

    定制AI智能眼镜_带摄像翻译导航大模型的ai眼镜硬件方案

    AI眼镜硬件方案能满足高性能、低功耗、全场景交互需求,采用联发科(MTK)专属智能穿戴芯片方案作为核心算力支撑,整合1600万高清摄像与2/3/5通道可定制麦克风阵列,搭载自研优化的
    的头像 发表于 02-02 19:46 410次阅读
    定制<b class='flag-5'>AI</b><b class='flag-5'>智能</b>眼镜_带摄像<b class='flag-5'>头</b>翻译导航大模型的<b class='flag-5'>ai</b>眼镜<b class='flag-5'>硬件</b>方案

    奥拓电子旗下创想数维推动AI+XR直播持续渗透多个领域

    在直播电商与内容产业持续演进的背景下,“AI+直播”正成为推动行业效率升级与体验革新的关键变量。作为LED 显示与 XR 虚拟拍摄领域的重要参与者,奥拓电子正通过旗下子公司创想数维,加速推动
    的头像 发表于 01-16 09:53 865次阅读

    瑞芯微SOC智能视觉AI处理器

    需要连接多种外设的产品。显示: 支持双屏异,最高4K@60fps输出。 RK1126B: 一款集成自研NPU的智能视觉AI处理器,专注于视频输入端的AI分析与处理。CPU: 双核A5
    发表于 12-19 13:44

    谷歌XR生态加速落地:Galaxy XR上线月入60+应用,Project Aura明年发售

    将在2026年发售 在“The Android Show”活动中,谷歌正式介绍了公司的四种 XR 设备路线:XR 设备、有线 XR
    的头像 发表于 12-11 10:18 1.7w次阅读
    谷歌<b class='flag-5'>XR</b>生态加速落地:Galaxy <b class='flag-5'>XR</b>上线月入60+应用,Project Aura明年发售

    谷东智能光学与硬件技术助力XR生态价值落地

    的 Android 生态为基底,首次实现了 XR 领域系统层面的整合与统一,这一突破不仅改写了 XR 产业的发展规则,更让作为首家登上谷歌 APAC TV summit 峰会的全彩 AI
    的头像 发表于 12-11 09:49 902次阅读

    RK3576驱动高端控系统升级:多屏拼控与AI视觉融合解决方案

    在数字化工业与城市管理领域,高端控系统是连接设备、数据与决策的关键核心。智慧工厂中控大厅、交通调度指挥中心、能源与安防监控平台等场景,均需同时处理多路高清视频、AI 识别结果及远程交互指令。传统
    发表于 11-21 17:51

    谷东智能AI+AR技术赋能重构智能终端体验边界

    近期,海外Android最大应用平台谷歌 Google Play 商店悄悄上线了全新“XR ”专属分类,将有望在此分类下整合AR/VR/MR等应用,这看似简单的功能更新,实则成为撬动全球
    的头像 发表于 11-19 15:16 884次阅读

    RK3576在智能工程机械中的应用|三屏八摄AI视觉解决方案

    系统下运行流畅。 其CPU利用率低、系统温度控制优异,非常适合在工程机械原型系统与AI视觉终端中进行应用验证。 五、结语 三屏异与八路摄像输入不仅代表着RK3576的硬件实力,更
    发表于 11-07 22:11

    三星出击!首款XRGalaxy XR登场,AI智能眼镜蓄势待发

    电子发烧友网报道(文/莫婷婷)近日,三星推出首款混合现实——Galaxy XR,由此正式进军XR(扩展现实)市场。该设备售价1800美元
    的头像 发表于 10-23 09:15 5569次阅读
    三星出击!首款<b class='flag-5'>XR</b><b class='flag-5'>头</b><b class='flag-5'>显</b>Galaxy <b class='flag-5'>XR</b>登场,<b class='flag-5'>AI</b><b class='flag-5'>智能</b>眼镜蓄势待发

    AI赋能6G与卫星通信:开启智能天网新时代

    的\"天网\"更加智能、可靠和高效。 AI驱动的网络优化:让6G网络\"聪明\"起来 想象一下,当城市中突然出现大型活动,如体育赛事或音乐节,6G网络如何应对激增的用户
    发表于 10-11 16:01

    和集有什么区别?一篇搞懂!​

    选电脑时,“显卡”是决定使用体验的关键硬件。有人纠结“集够不够用”,有人担心“独太贵且笨重”。其实独(独立显卡)和集
    的头像 发表于 09-19 16:09 9098次阅读
    独<b class='flag-5'>显</b>和集<b class='flag-5'>显</b>有什么区别?一篇搞懂!​

    特朗普质疑英特尔CEO陈立武涉嫌严重利益冲突,应立即辞职

    8月7日,外媒报道,美国总统特朗普周四要求英特尔新任CEO陈立武立即辞职,称他因与中国企业的关系而“陷入高度冲突”,并对这家陷入困境的美国芯片巨头扭转局面的计划表示怀疑。英特尔股票周四收盘下跌3%。
    的头像 发表于 08-08 10:11 4532次阅读
    特朗普质疑英特尔CEO陈立武涉嫌严重利益冲突,应立即辞职

    360环视技术推荐的硬件平台:支持多摄像与三屏异的理想选择

    智能硬件不断升级的今天,360环视技术早已不只是豪华车型的专属。通过布置多路摄像,并将其图像进行融合处理,360环视可以为系统提供车辆或设备周围的完整视野。 它不仅能够消除盲区,还能通过A
    发表于 07-30 17:32

    最新人工智能硬件培训AI基础入门学习课程参考2025版(离线AI语音视觉识别篇)

    端侧离线 AI 智能硬件作为 AI 技术的重要载体之一,凭借其无需依赖网络即可实现智能功能的特性,在一些网络条件受限或对数据隐私有较高要求的
    发表于 07-04 11:14