0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Meta的Flamera头显降低准确直通AR所需的原始计算能力

IEEE电气电子工程师 来源:IEEE电气电子工程师 2023-09-06 17:13 次阅读

Meta的最新原型头显Flamera像是直接从科幻动作片中来的一样,它在Siggraph 2023上引起了人们的注意 —— Flamera在那里获得了令人垂涎的Best in Show奖。

据悉,Flamera原型头显展示了接近人眼分辨率和全新的"透视"真实世界的技术。该原型或许为VR、MR和AR的未来铺平了道路。头显原型展示的技术突破引发了人们的兴趣和关注。

Moor Insights&Strategy副总裁兼首席分析师Ansel Sag表示:“这绝对是我见过的质量最好的(增强现实)实现透视真实世界的全新方法。”

出于显而易见的原因,在物理上不可能将头显的摄像头与用户的眼睛完全放置在同一位置。这种位移导致了我(作者,以下简称我)个人经历的视角的转变:我在使用AR/VR头显时撞到了墙上,或者被被椅子绊倒了。像Meta Quest Pro这样的尖端头显,通过从正确的角度重新投射周围环境的视图,跨越了这一障碍,但解决方案可能会导致视觉失真。

Meta的虫眼Flamera提出了一个新颖的解决方案。它摒弃了当前头显青睐的外部摄像头阵列,采用了独特的“光场穿透”设计,将图像传感器与物理控制到达传感器的光的孔径配对。会导致不正确视角的光被阻挡,而提供准确视角的光则被允许到达传感器。

当直接通过镜头观看时,结果很奇怪:这有点像透过纸上的洞看世界。头显重新排列原始图像以消除间隙并重新定位传感器数据。一旦这个过程完成,耳机就会为用户提供准确的世界视图。

Sag说:“这绝对是一个原型,但它的图像质量和分辨率给我留下了深刻印象。” “帧速率很好,”ModiFace的软件开发总监Edgar Maucourant也演示了这款头显,并对此印象深刻,“我的眼睛所看到的东西和我的手的位置与我的手真正的位置之间没有延迟,也没有差异。”

Maucourant认为Flamera的准确性可能会为用户直接与周围世界互动的AR应用程序带来福音。“例如,如果我们考虑远程辅助,人们必须操纵物体,那么今天它是用HoloLens和Magic Leap等AR眼镜来实现的……我们可以想象使用AR穿透来实现这一点。”

与微软的HoloLens和Magic Leap进行比较很重要。它们通过透明显示器绕过了透视问题,让用户的视觉畅通无阻。当HoloLens于2016年发布时,这种方法感觉像是未来的趋势,但其显示质量、视野和亮度仍然存在问题。

Meta的Quest Pro和苹果即将推出的Vision Pro强调了这一方向的转变。尽管以AR/VR头显(或者,苹果方以“空间计算机”)的形式进行营销,但它们显然是虚拟现实家族的一个分支。它们通过不透明的显示器完全遮挡了用户的视野。增强现实是通过视频馈送提供的,该视频馈送将外部世界投射到显示器。

Vision Pro解决直通问题的方法更注重肌肉而非大脑。它使用了一系列与其他AR/VR头显类似的外部摄像头,但将其与苹果定制的R1芯片配对,该芯片与苹果M2芯片协同工作(就像该公司笔记本电脑中的芯片一样)。R1是一个“视觉处理器”,可以帮助vision Pro的12台相机通过计算校正视角(以及其他任务)。这很像Meta在Quest Pro上尝试的方法,但苹果将功率提高到了11。

META

Meta的Flamera取而代之的是用镜头校正视角。这大大降低了准确直通AR所需的原始计算能力。

但这并不是说Meta已经完全打开了AR。Flamera的技术距离可供购买的头显还有很长的路要走,目前与传统的直通AR相比存在一些缺点。Sag表示,该头显“视野相当有限”,并注意到其景深“不连续”,这意味着远处的物体看起来比实际更近。Maucourant警告说“颜色不太好”,并认为头显的分辨率很低。

尽管如此,Flamera或展示了Meta、苹果和其他希望进入AR领域的公司之间即将发生的争论方向。科技界的大腕们似乎确信,明天最好的AR/VR头显看起来更像最初的Oculus Rift,而不是微软的HoloLens。然而,目前这些原型更多还是在研究阶段,离成为消费级产品还有一段距离。未来,头显技术的发展还需要在各个方面进行突破和创新,以实现更高的分辨率、更低的延迟、更舒适的使用体验等。只有解决了这些问题,才能让用户真正感受到头显带来的沉浸式体验,进一步推动VR、MR和AR技术的广泛应用。

审核编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Ar
    Ar
    +关注

    关注

    24

    文章

    4966

    浏览量

    167392
  • 计算机
    +关注

    关注

    19

    文章

    6652

    浏览量

    84573
  • Meta
    +关注

    关注

    0

    文章

    164

    浏览量

    11180
  • 头显
    +关注

    关注

    0

    文章

    116

    浏览量

    7559

原文标题:Meta的Flamera头显对增强现实有了新的愿景

文章出处:【微信号:IEEE_China,微信公众号:IEEE电气电子工程师】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    Meta预告2027年推AR眼镜,采用LCoS显像和玻璃波导技术

    关于这款眼镜的详细信息尚未公布,仅知其将具备“高 FOV 沉浸感”。目前尚不确定此言所指是否为 Meta 计划在今年 Connect 大会上亮相的 AR眼镜演示样品,抑或是预计于 2027 年面世的简化版本。
    的头像 发表于 04-28 15:42 78次阅读

    高通与Meta合作优化Meta Llama 3,实现终端侧运行

    高通技术公司高级副总裁兼技术规划和边缘解决方案业务总经理马德嘉表示:“我们对Meta开放Meta Llama 3的策略表示赞赏,高通与Meta均致力于赋能开发者,推动AI创新。
    的头像 发表于 04-22 09:51 122次阅读

    Meta推出最强开源模型Llama 3 要挑战GPT

    公司这次开源了Llama 3 8B与70B两款不同规模的模型,开发者可以免费使用,而Meta公司还将陆续推出一系列具备多模态、多语言对话、更长上下文窗口等能力的新模型。 据悉Meta用搭载超2.4万块
    的头像 发表于 04-19 17:00 469次阅读

    Meta拒绝和谷歌在VR/AR领域合作提议

    Meta拒绝和谷歌在VR/AR领域合作提议 据外媒报道,Meta拒绝和谷歌在VR/AR领域合作的提议。 谷歌原本希望通过合作促成混合现实头显产品Quest 搭载谷歌Android XR
    的头像 发表于 03-02 15:48 2135次阅读

    苹果与Meta竞逐AR眼镜市场

     Vision Pro与Quest 3的竞争尚未落幕,如今AR眼镜成了新焦点。Meta公司首席执行官马克·扎克伯格曾以Quest 3头显超越Vision Pro表述引发争议。
    的头像 发表于 02-28 11:47 152次阅读

    如何计算运算放大器所需的压摆率?

    如何计算运算放大器所需的压摆率?
    的头像 发表于 12-15 16:47 1355次阅读
    如何<b class='flag-5'>计算</b>运算放大器<b class='flag-5'>所需</b>的压摆率?

    联发科宣布与Meta合作,将共同开发AR眼镜芯片

    2023年10月,meta与眼镜品牌雷朋联名共同推出了装有摄像头、麦克风、扬声器等的智能眼镜。预计新一代Meta智能眼镜将内置与ar设备相同的显示屏。
    的头像 发表于 11-17 14:16 462次阅读

    FFT计算原始信号频率求出的频率值有时会是原始信号两倍的原因?

    FFT计算原始信号频率求出的频率值有时会是原始信号的两倍
    发表于 10-16 06:02

    SMT贴片加工生产怎么提高直通

    到最后一道工序一次性合格的比例。这个参数可以直接反映出来SMT贴片加工厂的加工能力可以直接体现SMT加工厂的质量控制,直通率越高,能力越高。 为保证SMT贴片加工的直通率,我们听到最多
    的头像 发表于 09-13 09:38 309次阅读

    尖端AR技术如何在美国革新外科手术实践?

    在他们的实践中可能产生显著影响,减少手术室中因人为错误而导致的并发症和死亡。AR智能眼镜可以通过远程协助和辅助软件提高外科医生的准确性、速度和效率,最终降低患者风险。外科医生报告的三个主要受益领域
    发表于 09-05 09:57

    如何在SAM时代下打造高效的高性能计算大模型训练平台

    在一起,从而显著提升模型的泛化能力。SAM 的设计初衷是简化图像分割的过程,减少对专业建模知识的依赖,并降低大规模训练所需计算资源。
    的头像 发表于 08-21 04:02 1363次阅读
    如何在SAM时代下打造高效的高性能<b class='flag-5'>计算</b>大模型训练平台

    Meta将推出两款原型头显,量产或需要时间

    而在今年,Meta将展示两款原型头显:Butterscotch Varifocal将展示近视网膜分辨率和变焦光学器件,而 Flamera则验证了一种新颖的无重投影的真实世界透视方法。
    的头像 发表于 08-04 11:05 543次阅读

    高通携手Meta利用Llama 2赋能终端侧AI应用

    和服务相比,终端侧AI部署能够助力开发者以显著降低的成本,提升用户隐私保护、满足用户安全偏好、增强应用可靠性,并实现个性化。 高通技术公司和Meta正在合作优化Meta Llama 2大语言模型直接在终端侧的执行,无需仅依赖云服
    的头像 发表于 07-19 10:00 355次阅读
    高通携手<b class='flag-5'>Meta</b>利用Llama 2赋能终端侧AI应用

    如何使用meta-imx层中提供的tensorflow-lite编译图像?

    我们正在尝试使用 meta-imx 层中提供的 tensorflow-lite 编译图像。我们没有任何 自定义更改/bbappends (Highlight to read)sources
    发表于 05-29 06:55

    河套IT WALK(总第58期):Meta领跑芯片战,ChatGPT颠覆医疗行业

    亲爱的朋友,欢迎来到今日河套IT WALK——科技新闻的盛宴! 让我们一同跳上科技的快车,领略人工智能、云计算、无线网络及AR/VR等领域的最新突破。 在这个日新月异的科技世界里,我们将见证人
    的头像 发表于 05-20 05:40 408次阅读
    河套IT WALK(总第58期):<b class='flag-5'>Meta</b>领跑芯片战,ChatGPT颠覆医疗行业