0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Meta的Flamera头显降低准确直通AR所需的原始计算能力

IEEE电气电子工程师 来源:IEEE电气电子工程师 2023-09-06 17:13 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

Meta的最新原型头显Flamera像是直接从科幻动作片中来的一样,它在Siggraph 2023上引起了人们的注意 —— Flamera在那里获得了令人垂涎的Best in Show奖。

据悉,Flamera原型头显展示了接近人眼分辨率和全新的"透视"真实世界的技术。该原型或许为VR、MR和AR的未来铺平了道路。头显原型展示的技术突破引发了人们的兴趣和关注。

Moor Insights&Strategy副总裁兼首席分析师Ansel Sag表示:“这绝对是我见过的质量最好的(增强现实)实现透视真实世界的全新方法。”

出于显而易见的原因,在物理上不可能将头显的摄像头与用户的眼睛完全放置在同一位置。这种位移导致了我(作者,以下简称我)个人经历的视角的转变:我在使用AR/VR头显时撞到了墙上,或者被被椅子绊倒了。像Meta Quest Pro这样的尖端头显,通过从正确的角度重新投射周围环境的视图,跨越了这一障碍,但解决方案可能会导致视觉失真。

Meta的虫眼Flamera提出了一个新颖的解决方案。它摒弃了当前头显青睐的外部摄像头阵列,采用了独特的“光场穿透”设计,将图像传感器与物理控制到达传感器的光的孔径配对。会导致不正确视角的光被阻挡,而提供准确视角的光则被允许到达传感器。

当直接通过镜头观看时,结果很奇怪:这有点像透过纸上的洞看世界。头显重新排列原始图像以消除间隙并重新定位传感器数据。一旦这个过程完成,耳机就会为用户提供准确的世界视图。

Sag说:“这绝对是一个原型,但它的图像质量和分辨率给我留下了深刻印象。” “帧速率很好,”ModiFace的软件开发总监Edgar Maucourant也演示了这款头显,并对此印象深刻,“我的眼睛所看到的东西和我的手的位置与我的手真正的位置之间没有延迟,也没有差异。”

Maucourant认为Flamera的准确性可能会为用户直接与周围世界互动的AR应用程序带来福音。“例如,如果我们考虑远程辅助,人们必须操纵物体,那么今天它是用HoloLens和Magic Leap等AR眼镜来实现的……我们可以想象使用AR穿透来实现这一点。”

与微软的HoloLens和Magic Leap进行比较很重要。它们通过透明显示器绕过了透视问题,让用户的视觉畅通无阻。当HoloLens于2016年发布时,这种方法感觉像是未来的趋势,但其显示质量、视野和亮度仍然存在问题。

Meta的Quest Pro和苹果即将推出的Vision Pro强调了这一方向的转变。尽管以AR/VR头显(或者,苹果方以“空间计算机”)的形式进行营销,但它们显然是虚拟现实家族的一个分支。它们通过不透明的显示器完全遮挡了用户的视野。增强现实是通过视频馈送提供的,该视频馈送将外部世界投射到显示器。

Vision Pro解决直通问题的方法更注重肌肉而非大脑。它使用了一系列与其他AR/VR头显类似的外部摄像头,但将其与苹果定制的R1芯片配对,该芯片与苹果M2芯片协同工作(就像该公司笔记本电脑中的芯片一样)。R1是一个“视觉处理器”,可以帮助vision Pro的12台相机通过计算校正视角(以及其他任务)。这很像Meta在Quest Pro上尝试的方法,但苹果将功率提高到了11。

META

Meta的Flamera取而代之的是用镜头校正视角。这大大降低了准确直通AR所需的原始计算能力。

但这并不是说Meta已经完全打开了AR。Flamera的技术距离可供购买的头显还有很长的路要走,目前与传统的直通AR相比存在一些缺点。Sag表示,该头显“视野相当有限”,并注意到其景深“不连续”,这意味着远处的物体看起来比实际更近。Maucourant警告说“颜色不太好”,并认为头显的分辨率很低。

尽管如此,Flamera或展示了Meta、苹果和其他希望进入AR领域的公司之间即将发生的争论方向。科技界的大腕们似乎确信,明天最好的AR/VR头显看起来更像最初的Oculus Rift,而不是微软的HoloLens。然而,目前这些原型更多还是在研究阶段,离成为消费级产品还有一段距离。未来,头显技术的发展还需要在各个方面进行突破和创新,以实现更高的分辨率、更低的延迟、更舒适的使用体验等。只有解决了这些问题,才能让用户真正感受到头显带来的沉浸式体验,进一步推动VR、MR和AR技术的广泛应用。

审核编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Ar
    Ar
    +关注

    关注

    25

    文章

    5236

    浏览量

    175457
  • 计算机
    +关注

    关注

    19

    文章

    7764

    浏览量

    92674
  • Meta
    +关注

    关注

    0

    文章

    316

    浏览量

    12329
  • 头显
    +关注

    关注

    0

    文章

    154

    浏览量

    7934

原文标题:Meta的Flamera头显对增强现实有了新的愿景

文章出处:【微信号:IEEE_China,微信公众号:IEEE电气电子工程师】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    使用安森美图像传感器的AR与VR头戴设备系统应用方案

    增强现实(AR)与虚拟现实(VR)标志着人机交互领域的重大飞跃,其打造的沉浸式体验远超传统屏幕交互模式。AR
    的头像 发表于 11-27 13:48 2299次阅读
    使用安森美图像传感器的<b class='flag-5'>AR</b>与VR头戴设备系统应用方案

    RK3576驱动高端控系统升级:多屏拼控与AI视觉融合解决方案

    系统依赖多工控主机、外接显卡和解码器,存在功耗高、延迟大的问题。而瑞芯微 RK3576 打造的新一代 AI 多媒体平台,凭借 “三屏异 + 八路摄像输入 + AI 边缘计算” 的架构,全面提升高端
    发表于 11-21 17:51

    RK3576机器人核心:三屏异+八路摄像,重塑机器人交互与感知

    瑞芯微RK3576 AIoT处理器处理器凭借其卓越的多屏异与8路摄像接入能力,为机器人领域带来革新。米尔电子MYD-LR3576开发板实测数据显示,在高负载下CPU占用仅34%,完美实现多路视觉
    发表于 10-29 16:41

    谷东智能三重突破构建AI+AR眼镜行业技术护城河

    10 月 22 日,三星在 XR 发布会上抛出重磅消息:正式官宣 AI 眼镜开发计划,并将联合谷歌与 Gentle Monster 等时尚品牌,此前据报道称,三星将于 2026 年推出无显示功能
    的头像 发表于 10-27 17:39 1085次阅读

    Arm与Meta深化战略合作

    近日,Arm 与 Meta 宣布一项战略合作项目,双方将围绕人工智能 (AI) 软件与数据中心基础设施两大核心领域,全面提升各计算层面的 AI 效率,为全球数十亿用户打造更丰富的体验。从驱动终端侧
    的头像 发表于 10-24 17:54 1480次阅读

    三镜齐发+神经腕带!Meta AI眼镜“全家桶”开启“意念操控”时代

    Vanguard、全新的AR智能眼镜Meta Ray-Ban Display三款AI智能眼镜新品,此外亮相的还有腕带设备Neural Band,可以与Meta Ray-Ban Display AI眼镜进行交互
    的头像 发表于 09-20 02:10 1.2w次阅读
    三镜齐发+神经腕带!<b class='flag-5'>Meta</b> AI眼镜“全家桶”开启“意念操控”时代

    360环视技术推荐的硬件平台:支持多摄像与三屏异的理想选择

    摄像接入通道不够,限制了视野覆盖;l 视频编解码能力不足,画面延迟;l 缺乏AI识别能力,无法实现智能感知;l 输出能力弱,难以支持多屏显示或异
    发表于 07-30 17:32

    Meta非入侵式脑机技术:AI读取大脑信号打字准确率80%

    Meta首席执行官马克・扎克伯格曾透露,公司正在研发一项革命性的脑机技术,旨在让用户通过大脑直接输入文字。近日,《麻省理工技术评论》报道称,Meta已经成功实现了这一技术突破。 据悉,Meta的这项
    的头像 发表于 02-11 15:45 1027次阅读

    【新创云】探索未来视野:RK3566 AR眼镜主板(RK3566+DP显示输出),引领穿戴设备新潮流

    体验RK3566 AR眼镜主板搭载了四核Cortex - A55平台,主频高达1.8GHz 1。这一强大的配置使得主板具备高性能、低功耗的特性,能够轻松应对AR眼镜在运行过程中复杂的计算任务,无论是处理高清图像
    发表于 02-05 15:44

    利用创新的直通降压-升压控制器提高系统效率并降低 EMI

    。但人们总是需要更高的效率和更低的噪音,设计师们再次开始行动。 在研究可进一步提高效率并降低电磁干扰 (EMI) 的独特直通架构之前,让我们先了解一下 DC/DC 控制器是如何发展的。 DC/DC控制器的演变 经过数十年大大小小的改进,DC/DC 控制器组件和模块已经沿着
    的头像 发表于 01-25 17:30 821次阅读
    利用创新的<b class='flag-5'>直通</b>降压-升压控制器提高系统效率并<b class='flag-5'>降低</b> EMI

    米尔瑞芯微RK3576实测轻松搞定三屏八摄像

    能力和丰富的接口资源,非常适合用于高端控系统的开发和优化。 综上所述,RK3576以其卓越的计算能力、多屏幕支持、强大的视频编解码能力和高
    发表于 01-17 11:33

    Meta Quest Pro全球停售,销量不佳致系列被砍

    Meta公司近日宣布,其旗下高端旗舰级虚拟现实Quest Pro已在全球范围内正式停售。这款在停售前,售价为999.99美元,相较于
    的头像 发表于 01-07 14:37 1439次阅读

    两款VR大拆解,都用了哪些芯片?

    ifixit拆解了苹果的Vision Pro,维深信息拆解了Meta的Quest Pro,我们从两款VR结构设计、镜头和光学系统、主要芯片等多个方面进行分析与总结。 ①、Vision Pro
    的头像 发表于 12-27 16:40 4025次阅读
    两款VR<b class='flag-5'>头</b><b class='flag-5'>显</b>大拆解,都用了哪些芯片?

    Meta要求阻止OpenAI营利化转变

    重量级企业。 据报道,Meta在致加州总检察长邦塔的信中表达了其担忧,认为允许OpenAI进行这种转变将对硅谷产生重大影响。Meta要求邦塔采取直接行动,以阻止这一转变的发生。同时,Meta还表示,马斯克和前OpenAI董事会成
    的头像 发表于 12-17 09:57 685次阅读

    Meta发布新AI模型Meta Motivo,旨在提升元宇宙体验

    Meta公司近日宣布,将推出一款名为Meta Motivo的全新人工智能模型。该模型具备控制类似人类的数字代理动作的能力,有望为元宇宙的用户体验带来显著提升。 Meta Motivo的
    的头像 发表于 12-16 10:34 1347次阅读