0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Meta的Flamera头显降低准确直通AR所需的原始计算能力

IEEE电气电子工程师 来源:IEEE电气电子工程师 2023-09-06 17:13 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

Meta的最新原型头显Flamera像是直接从科幻动作片中来的一样,它在Siggraph 2023上引起了人们的注意 —— Flamera在那里获得了令人垂涎的Best in Show奖。

据悉,Flamera原型头显展示了接近人眼分辨率和全新的"透视"真实世界的技术。该原型或许为VR、MR和AR的未来铺平了道路。头显原型展示的技术突破引发了人们的兴趣和关注。

Moor Insights&Strategy副总裁兼首席分析师Ansel Sag表示:“这绝对是我见过的质量最好的(增强现实)实现透视真实世界的全新方法。”

出于显而易见的原因,在物理上不可能将头显的摄像头与用户的眼睛完全放置在同一位置。这种位移导致了我(作者,以下简称我)个人经历的视角的转变:我在使用AR/VR头显时撞到了墙上,或者被被椅子绊倒了。像Meta Quest Pro这样的尖端头显,通过从正确的角度重新投射周围环境的视图,跨越了这一障碍,但解决方案可能会导致视觉失真。

Meta的虫眼Flamera提出了一个新颖的解决方案。它摒弃了当前头显青睐的外部摄像头阵列,采用了独特的“光场穿透”设计,将图像传感器与物理控制到达传感器的光的孔径配对。会导致不正确视角的光被阻挡,而提供准确视角的光则被允许到达传感器。

当直接通过镜头观看时,结果很奇怪:这有点像透过纸上的洞看世界。头显重新排列原始图像以消除间隙并重新定位传感器数据。一旦这个过程完成,耳机就会为用户提供准确的世界视图。

Sag说:“这绝对是一个原型,但它的图像质量和分辨率给我留下了深刻印象。” “帧速率很好,”ModiFace的软件开发总监Edgar Maucourant也演示了这款头显,并对此印象深刻,“我的眼睛所看到的东西和我的手的位置与我的手真正的位置之间没有延迟,也没有差异。”

Maucourant认为Flamera的准确性可能会为用户直接与周围世界互动的AR应用程序带来福音。“例如,如果我们考虑远程辅助,人们必须操纵物体,那么今天它是用HoloLens和Magic Leap等AR眼镜来实现的……我们可以想象使用AR穿透来实现这一点。”

与微软的HoloLens和Magic Leap进行比较很重要。它们通过透明显示器绕过了透视问题,让用户的视觉畅通无阻。当HoloLens于2016年发布时,这种方法感觉像是未来的趋势,但其显示质量、视野和亮度仍然存在问题。

Meta的Quest Pro和苹果即将推出的Vision Pro强调了这一方向的转变。尽管以AR/VR头显(或者,苹果方以“空间计算机”)的形式进行营销,但它们显然是虚拟现实家族的一个分支。它们通过不透明的显示器完全遮挡了用户的视野。增强现实是通过视频馈送提供的,该视频馈送将外部世界投射到显示器。

Vision Pro解决直通问题的方法更注重肌肉而非大脑。它使用了一系列与其他AR/VR头显类似的外部摄像头,但将其与苹果定制的R1芯片配对,该芯片与苹果M2芯片协同工作(就像该公司笔记本电脑中的芯片一样)。R1是一个“视觉处理器”,可以帮助vision Pro的12台相机通过计算校正视角(以及其他任务)。这很像Meta在Quest Pro上尝试的方法,但苹果将功率提高到了11。

META

Meta的Flamera取而代之的是用镜头校正视角。这大大降低了准确直通AR所需的原始计算能力。

但这并不是说Meta已经完全打开了AR。Flamera的技术距离可供购买的头显还有很长的路要走,目前与传统的直通AR相比存在一些缺点。Sag表示,该头显“视野相当有限”,并注意到其景深“不连续”,这意味着远处的物体看起来比实际更近。Maucourant警告说“颜色不太好”,并认为头显的分辨率很低。

尽管如此,Flamera或展示了Meta、苹果和其他希望进入AR领域的公司之间即将发生的争论方向。科技界的大腕们似乎确信,明天最好的AR/VR头显看起来更像最初的Oculus Rift,而不是微软的HoloLens。然而,目前这些原型更多还是在研究阶段,离成为消费级产品还有一段距离。未来,头显技术的发展还需要在各个方面进行突破和创新,以实现更高的分辨率、更低的延迟、更舒适的使用体验等。只有解决了这些问题,才能让用户真正感受到头显带来的沉浸式体验,进一步推动VR、MR和AR技术的广泛应用。

审核编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Ar
    Ar
    +关注

    关注

    25

    文章

    5292

    浏览量

    176663
  • 计算机
    +关注

    关注

    19

    文章

    7836

    浏览量

    93444
  • Meta
    +关注

    关注

    0

    文章

    325

    浏览量

    12496
  • 头显
    +关注

    关注

    0

    文章

    154

    浏览量

    7996

原文标题:Meta的Flamera头显对增强现实有了新的愿景

文章出处:【微信号:IEEE_China,微信公众号:IEEE电气电子工程师】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    量子计算即将彻底改变AR和VR游戏领域

    量子计算常被视为解决科学、技术和工程领域复杂问题的利器,人们往往只关注其最前沿的应用。虽然这种增强的问题解决能力是量子计算应用开发的关键方面,但这类计算机还能推动更具艺术性和想象力的应
    的头像 发表于 04-17 10:19 384次阅读

    Meta与NVIDIA达成多年战略合作伙伴关系

    NVIDIA 今天宣布与 Meta 达成一项多年期、跨多代产品的战略合作伙伴关系,涵盖本地部署、云计算和 AI 基础设施。
    的头像 发表于 03-02 14:46 582次阅读

    【正点原子STM32N647开发板试用】--摄像

    原理图如下 这里使用IMX335 mipi接口摄像模块,500W像素,查阅其规格参数如下: 将摄像模组插到开发板上,准备好硬件如下 二.摄像 这里分两部分展开,先LCD显示,
    发表于 01-25 14:51

    Meta的AI慢性病,靠Manus能治吗?

    Meta
    脑极体
    发布于 :2026年01月08日 16:58:02

    使用安森美图像传感器的AR与VR头戴设备系统应用方案

    增强现实(AR)与虚拟现实(VR)标志着人机交互领域的重大飞跃,其打造的沉浸式体验远超传统屏幕交互模式。AR
    的头像 发表于 11-27 13:48 5972次阅读
    使用安森美图像传感器的<b class='flag-5'>AR</b>与VR头戴设备系统应用方案

    RK3576驱动高端控系统升级:多屏拼控与AI视觉融合解决方案

    系统依赖多工控主机、外接显卡和解码器,存在功耗高、延迟大的问题。而瑞芯微 RK3576 打造的新一代 AI 多媒体平台,凭借 “三屏异 + 八路摄像输入 + AI 边缘计算” 的架构,全面提升高端
    发表于 11-21 17:51

    RK3576机器人核心:三屏异+八路摄像,重塑机器人交互与感知

    瑞芯微RK3576 AIoT处理器处理器凭借其卓越的多屏异与8路摄像接入能力,为机器人领域带来革新。米尔电子MYD-LR3576开发板实测数据显示,在高负载下CPU占用仅34%,完美实现多路视觉
    发表于 10-29 16:41

    谷东智能三重突破构建AI+AR眼镜行业技术护城河

    10 月 22 日,三星在 XR 发布会上抛出重磅消息:正式官宣 AI 眼镜开发计划,并将联合谷歌与 Gentle Monster 等时尚品牌,此前据报道称,三星将于 2026 年推出无显示功能
    的头像 发表于 10-27 17:39 1811次阅读

    Arm与Meta深化战略合作

    近日,Arm 与 Meta 宣布一项战略合作项目,双方将围绕人工智能 (AI) 软件与数据中心基础设施两大核心领域,全面提升各计算层面的 AI 效率,为全球数十亿用户打造更丰富的体验。从驱动终端侧
    的头像 发表于 10-24 17:54 1713次阅读

    如何降低环境干扰强度对谐波检测设备准确性的影响?

      降低环境干扰强度对谐波检测设备准确性的影响,需围绕 “ 阻断干扰传播路径→优化设备自身抗扰能力→修正干扰导致的误差→合理布局规避干扰 ” 四大核心思路,从硬件防护、信号处理、安装布局、设备
    的头像 发表于 10-13 17:32 1197次阅读

    三镜齐发+神经腕带!Meta AI眼镜“全家桶”开启“意念操控”时代

    Vanguard、全新的AR智能眼镜Meta Ray-Ban Display三款AI智能眼镜新品,此外亮相的还有腕带设备Neural Band,可以与Meta Ray-Ban Display AI眼镜进行交互
    的头像 发表于 09-20 02:10 1.6w次阅读
    三镜齐发+神经腕带!<b class='flag-5'>Meta</b> AI眼镜“全家桶”开启“意念操控”时代

    灵犀微光推动AR眼镜在文旅场景中的落地

    Meta即将发布的高端智能眼镜Hypernova,再次把轻量级AR眼镜推向了公众视野。据公开信息,Meta此次重点押注“阵列光波导”技术方案。
    的头像 发表于 08-14 15:40 1113次阅读

    360环视技术推荐的硬件平台:支持多摄像与三屏异的理想选择

    摄像接入通道不够,限制了视野覆盖;l 视频编解码能力不足,画面延迟;l 缺乏AI识别能力,无法实现智能感知;l 输出能力弱,难以支持多屏显示或异
    发表于 07-30 17:32

    AR眼镜解决方案_ar眼镜芯片方案|光学方案|显示方案

    在选择AR眼镜方案时,轻量化、小型化以及低功耗是核心考量因素。AR眼镜的核心功能模块主要包括光学显示、传感器、摄像计算处理单元、音频模块及网络连接等,通常可以分为
    的头像 发表于 06-13 19:45 1456次阅读
    <b class='flag-5'>AR</b>眼镜解决方案_<b class='flag-5'>ar</b>眼镜芯片方案|光学方案|显示方案