0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

谷歌开发者大会:ARCore新增迅速放置API等功能

工程师邓生 来源:搜狐网 作者:VR陀螺 2020-11-19 11:56 次阅读

2020谷歌开发者大会开启,AR软件工程总监王启文发布ARCore最新动态

VR陀螺11月18日消息,Google 开发者大会 (Google Developer Summit) 是谷歌面向开发者展示最新产品和平台的年度盛会。2020 Google 开发者大会于 11 月 16 日 至 21 日举行,这是谷歌首次以全线上大会的形式与中国开发者相聚。本次大会以“代码不止”为主题,介绍了相关产品更新以及一系列面向本地开发者的技术支持内容,旨在赋能开发者高效创新、持续不断地创造愉悦的产品体验。

其中,11月16日,谷歌软件工程总监王启文(Leon Wang)发表了关于“ARCore为用户创造有效的AR体验”的主题演讲。

王启文Leon是 Google AR 团队的软件工程总监,主管ARCore 的机器感知算法项目,如运动跟踪和深度感知等技术的开发。加入 Google 之前,他在 Microsoft, Facebook 和 Pinterest 先后担任过工程经理。Leon拥有麻省理工学院计算机科学的学士和硕士学位。

首先,王启文强调了AR作为一种视觉沉浸式媒介,能够吸引人们的注意力,是一种体验信息的新方式,并最终推动用户的行动。而谷歌发布于2018年的ARCore是AR开发者平台,提供了简单而强大的工具,为AndroidiOS用户创造有效的AR体验。目前已被应用在7亿台设备和成千上万款app上,并且已获得一些更新。

其中,王启文介绍了包括美图、滴滴、有道少儿词典的中国开发者如何使用ARCore提高产品的性能和体验。

美图公司利用ARCore的增强面孔API(Augmented Faces API)构建了100多个自拍滤镜,就是现在我们在BeautyPlus上可以体验到的AR特效,用户可以拍摄照片和视频与朋友分享。

增强面孔API(Augmented Faces API)从2D图像中生成3D网格,可追踪嘴部动作、眨眼、点头和一些复杂的细节。

滴滴的ARCore导航功能帮助乘客在火车站、商场和机场等大型公共区域找到司机。滴滴地图中加入了AR路标,15%的用户使用AR来引导他们找到订单司机,80%的用户给出好评。

有道少儿词典应用使用AR来帮助孩子们以一种有趣和吸引人的方式学习新单词。该应用将“三角龙Triceratops ”等单词与其3D模型在AR中配对,父母可以把AR画面录制或拍照,方便日后成为孩子们可参考的学习材料。

另外,ARCore的新增功能如下:

迅速放置API(Instant Placement API)

一般来说,用户在空间中放置过ar对象时,需要先用手机扫描周围的环境,完成3D表面检测。但这个过程将耗费一些时间和精力。实际上,在大多数情况下,我们不需要知道AR对象确切的3D位置也可以正确地呈现它。

借助迅速放置API和几行代码,开发人员可让用户将AR对象锚定到2D图像中,而不需要确切知道AR对象具体的3D位置。如果需要更精确的比例,可以针对3D位置进行三角测量。

景深应用API(Depth API)

景深API可以从单个RGB相机生成地图。原理是通过不同角度拍摄多张图像,并在移动手机时进行比较,以估计到每个像素的距离。尽管只有一个RGB相机,添加了景深传感器(如飞行时间传感器),会让景深地图效果更好。

景深可以通过多种方式增强AR真实感,“遮挡”是其中一种景深应用,即隐藏数字物体在现实世界中被遮挡的部分,从而使它们看上去像是在现实场景中真实存在。

另一种是“表面交互”,即在设备中的世界里,添加3D层面的计算,可以实现与现实物品表面的交互,比如创意AR对象,并在其表面设计反弹和飞溅的动作。此功能可以用于开发新的交互式游戏机制,使玩家能够躲在真实物体的后面。Snapchat的Dancing Hotdog和Undersea World Lens效果都使用了景深。

Persistent Cloud Anchors API

Cloud Anchors API可用于与多个用户共享ar对象。在相同物理空间中的不同位置同时查看这些对象并与之交互,AR内容也因此可使用更长时间。

这相当于一个“保存按钮”,人们可以基于相同的AR体验进行创作并进行反复修改。比如,Sybo和iDreamSky的Mark应用采用了该功能,人们可以在现实世界中与朋友一起创建、发现和共享ar艺术。

Epic Games收购实时人脸动画公司Hyprsense

Epic Games本周收购实时人脸动画公司Hyprsense,该公司关注于能将面部动作实时转换为动画3D形象的人脸捕捉运动。

Hyprsense前身为Binary VR,该公司最开始从事VR解决方案,用悬挂在VR头显前方的3D红外线捕捉相机准确捕捉面部运动数据,并在2017年交付用于原始Oculus Rift 、HTC Vive等头显的开发套件。

现在,三年过去了,该公司更名为Hyprsense于本周被Epic Games收购。虽然Hyprsense不再是一家专注于VR的企业,但其使用的技术能通过手机摄像头进行实时面部动作捕捉,然后将其转换为手机屏幕上的实时3D动画,如下所示。

其原理类似于Instagram和Facebook等社交媒体应用程序中的AR脸部追踪技术,Hyprsense在此基础上向前迈了一步,允许用户使用高度相似的3D头像来替代用户的脸部。

Epic Games首席技术官Kim Libreri在一份声明中说:“Hyprsense团队的加入有助于我们继续推动数字角色创新,朝着让所有创作者能尽情表达其创意的目标靠近。”

Epic表示,Hyprsense团队的主要工作是与其合作进行游戏开发和数字人类项目的工作,这将加快Epic为开发人员和玩家构建更好的新工具和系统的过程。

2020年11月评论数和评分最高的Quest游戏与应用程序

虽然Oculus并没有公开多少信息供大家了解各个应用程序在其VR商店中的表现,但通过查看应用程序之间的相互关系,可以获得一些信息。以下是截至2020年11月排名前20的Oculus Quest游戏和应用程序快照。

为什么要发布这些数据?

虽然SteamVR库拥有全面的跟踪数据库,但却并没有类似数据库存来跟踪Oculus商店的应用程序。因此,我们发布这些数据以让用户、开发人员和分析师深入了解Oculus应用程序的前景。

做一个简要的介绍:

付费与免费的应用程序分开评定

参评应用程序的评论数量需达到100条及以上

四舍五入的评分会让部分应用程序评分相同,但其排名按精确评分排序

最受好评的付费Oculus Quest应用程序

每款应用程序的评分反映了用户的综合评论与大家对每款游戏的接受程度。

评分数量最多的付费Oculus Quest应用程序

一般通过评分数量便可大致了解每款游戏的相对销量,数量高的游戏很可能比低的游戏卖得好。不过这样的判断方式肯定存在一定误差。

最受好评的免费Oculus Quest应用程序

评分数量最多的免费Oculus Quest应用程序

《假期模拟器》增加Quest手部追踪支持

11月17日,《假期模拟器》(Vacation Simulator)开发者Owlchemy Labs的首席执行官Devin Reimer在Twitter上发布了一段视频,其中显示了《假期模拟器》的场景,我们可以看到该游戏增加了手部跟踪支持,测试者在视频中比出了胜利手势和大拇指。

Owlchemy的游戏我们都非常熟悉,因此玩家大概能很快识别出来手势识别的稳定性。虽然Oculus Quest手势追踪功能已推出,但是除了《里奇的木板体验》(Richie‘s Plank Experience),《巫师圆舞曲》(Waltz of the Wizard)和《虚拟桌面》(Virtual Desktop)之外,并没有其他游戏支持手部追踪功能。

Owlchemy的《假期模拟器》和《工作模拟器》(Job Simulator)目前都登陆了Oculus Quest,并且最近针对Oculus Quest 2进行了增强。这两款游戏的v23版本更新部分包括视觉上的升级,删除了偏重的渲染,并在Quest 2上支持90Hz。

《假期模拟器》 最近还提供了免费的“Back to Job”扩展功能,这是将模拟器系列第一部《工作模拟器》中的部分机制添加到了《假期模拟器》 中去,提高游戏的趣味性。

《Echo Arena》VR电竞联赛第三赛季将于2021年1月开赛

VR大师赛(VR Master League,简称“VRML”)的《Echo Arena》电竞联赛第三赛季将于2021年1月开始举行,其结构和形式与往届相比会有所扩展。

联赛具体时间是从1月4日开始,一直持续到5月2日,决赛定在5月8-9日和5月14-15日举行。

作为新赛季扩展的一部分,VRML Echo Arena Discord频道已在本周开放,它将作为玩家和社区领导人监督联盟的枢纽。频道将安排花名册、提供讨论联赛规则的场地等。

新赛季还将引入晋级/降级模式,该规则在游戏商店Discord中的概述如下:

“大师赛将以循环赛制进行,后续赛则采用阶梯赛制。本赛季将有多轮比赛,每轮都以挑战者杯结束。挑战者杯将由排名倒数2位的大师队和排名前4位的钻石队来决定哪些团队将有资格参加大师赛和阶梯赛。”

之前的《Echo Arena》电竞联赛都在Twitch以及Oculus Venues上进行了现场直播,VR用户能在虚拟社交环境中观看比赛。VRML还为其他竞技类VR游戏比如第一人称射击游戏《Onward》组织联盟。

于几个月前上线Oculus Quest平台的《Echo Arena》采用竞技类多人游戏模式,该游戏源自2017年在Rift推出的《Lone Echo》中独立的单人游戏故事。

有兴趣参加第三季联赛的玩家,现可在VRML Echo Arena Discord网站创建帐户,并加入VRML Echo Arena Discord服务器。

责任编辑:PSY

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 谷歌
    +关注

    关注

    27

    文章

    5862

    浏览量

    103269
  • API
    API
    +关注

    关注

    2

    文章

    1384

    浏览量

    60997
  • 开发者
    +关注

    关注

    1

    文章

    499

    浏览量

    16395
收藏 人收藏

    评论

    相关推荐

    您有一份OpenHarmony开发者论坛2023年度总结,请查收~

    体验用户,并迅速在论坛开启了 OpenHarmony 技术交流。 通过开发者们在论坛进行提问、答疑、分享技术文章、技术资料等方式为论坛沉淀了丰富的 OpenHarmony 技术知识。 对此
    发表于 01-26 17:27

    HarmonyOS SDK,助力开发者打造焕然一新的鸿蒙原生应用

    六大领域的开发能力,为开发者带来简洁、高效的开发体验,开发者只需通过 API 调用即可实现丰富的鸿蒙原生应用
    发表于 01-19 10:31

    OpenHarmony北向-让更广泛的应用开发者更容易参与

    解决的。 另外就是现在DevEco Studio中OH项目的预览器,已经可以跑通开发的应用的主要界面与功能流程了。所以,前期OH北向应用开发者开发板上搞不定,也可以先在预览器上跑起来
    发表于 12-06 14:32

    请问adau1452可以做AEC ANC等功能吗?

    adau1452 可以做AEC ANC等功能吗?
    发表于 11-29 08:26

    OpenHarmony 应用开发SDK、API 与基础工具

    。C API 也包含在鸿蒙SDK 中,方便开发者使用 C 或者 C++语言实现应用相应功能。 C API 只覆盖了部分鸿蒙基础底层能力,如 libc,图形库,窗口系统,多媒体,压缩库等
    发表于 09-19 15:45

    多元共进|2023 Google 谷歌开发者大会回看视频陆续上线

    回看视频,随时随地全方面了解大会带来的干货知识,持续学习。 扫码直达官网 回看大会精彩内容 主旨演讲围绕 "开发提效"、"共创机遇"、"科技普惠",带来 产品与技术的重要更新 ,帮助开发者
    的头像 发表于 09-14 19:15 306次阅读
    多元共进|2023 Google <b class='flag-5'>谷歌</b><b class='flag-5'>开发者</b><b class='flag-5'>大会</b>回看视频陆续上线

    多元共进|2023 Google 谷歌开发者大会现场全回顾

    ! 持续关注大会官网 回看更多大会精彩专题演讲 2023 Google 开发者大会在激动人心的 主旨演讲 中拉开帷幕。主舞台场内座无虚席,在这精彩的一小时内,中外嘉宾轮番登场,分享了过
    的头像 发表于 09-07 22:10 686次阅读

    多元共进|2023 Google 谷歌开发者大会主旨演讲亮点回顾

    2023 Google 开发者大会 今日正式拉开帷幕 一起回顾主旨演讲精华内容 收获技术新知,实现多元共进! 主旨演讲亮点合集速览 扫码前往官网 查看主旨演讲完整回放 Google 大中华区总裁
    的头像 发表于 09-06 20:20 680次阅读
    多元共进|2023 Google <b class='flag-5'>谷歌</b><b class='flag-5'>开发者</b><b class='flag-5'>大会</b>主旨演讲亮点回顾

    十大功能特性,助力开发者玩转 API Explorer

    伴随着我国 API 生态逐渐成熟、市场发展不断完善,API 已广泛应用在以网页、移动应用、后端系统集成为主的众多开发场景中。同时,开发者API
    的头像 发表于 09-05 21:25 283次阅读
    十大<b class='flag-5'>功能</b>特性,助力<b class='flag-5'>开发者</b>玩转 <b class='flag-5'>API</b> Explorer

    开发者如何使用讯飞星火认知大模型API

    之前我们使用网页文本输入的方式体验了讯飞星火认知大模型的功能(是什么让科大讯飞1个月股价翻倍?),本篇博文将从开发者角度来看看如何使用讯飞星火认知大模型API
    的头像 发表于 08-15 12:22 4416次阅读
    <b class='flag-5'>开发者</b>如何使用讯飞星火认知大模型<b class='flag-5'>API</b>?

    期待相聚|官宣!2023 Google 谷歌开发者大会来了

    9 月 6-7 日,我们不见不散! 大会报名通道已开启 即刻扫码,亲临现场感受互动魅力! 关注 "谷歌开发者",获取更多大会信息
    的头像 发表于 08-02 17:40 850次阅读
    期待相聚|官宣!2023 Google <b class='flag-5'>谷歌</b><b class='flag-5'>开发者</b><b class='flag-5'>大会</b>来了

    涂鸦IoT开发者大会即将开幕!这些重大创新值得物联网开发者关注

    6月29日,首场TUYA开发者大会将在深圳拉开序幕! TUYA开发者大会是涂鸦继全球智能化商业峰会、全球硬科技开发者
    的头像 发表于 06-12 11:01 545次阅读
    涂鸦IoT<b class='flag-5'>开发者</b><b class='flag-5'>大会</b>即将开幕!这些重大创新值得物联网<b class='flag-5'>开发者</b>关注

    开放原子开源基金会OpenHarmony开发者大会2023演讲资料汇总

    、交通、教育、政务、家居等众多行业,OpenHarmony生态发展欣欣向荣。 本届OpenHarmony开发者大会将对OpenHarmony 3.2Release新特性、新能力进行深入介绍,同时邀请
    发表于 05-29 16:34

    官宣:7月7-9日,华为开发者大会2023(Cloud)

    2023年7月7日 华为开发者大会2023(Cloud) 将在中国东莞正式拉开帷幕 并将在国内30多个城市、海外10多个国家 开设分会场 每一个开发者 是立于时代潮头、地表好奇心最强的人 是心中
    的头像 发表于 05-29 11:15 775次阅读
    官宣:7月7-9日,华为<b class='flag-5'>开发者</b><b class='flag-5'>大会</b>2023(Cloud)

    快看!"谷歌开发者" 官方账号焕新啦

    自 2015 年 "谷歌开发者" 官方账号 创办以来 我们在开发者们期待的目光中 稳步向前 始终致力于服务各位开发者 让大家能够 充分利用谷歌
    的头像 发表于 05-12 12:00 384次阅读
    快看!"<b class='flag-5'>谷歌</b><b class='flag-5'>开发者</b>" 官方账号焕新啦