0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

网易布局AR应用的技术挑战和方案

TdyZ_gh_70d0cce 来源:未知 作者:胡薇 2018-07-16 09:39 次阅读

你怎么看网易?快公司?慢公司?或者总能令人耳目一新的神奇公司。

1997年创立,至今已有21年,是中国最早的科技互联网代表。靠邮箱起步,其后又在门户厮杀中争得一方格局,再以游戏安身立命,近些年还能在教育、音乐和垂直电商中竖起鲜明大旗。

而且颇为神奇的是,在唯快不破的中国互联网竞争里,网易近几年的新业务往往不是最快的那一个,但却总能是以慢打快的那一个。

结果也有目共睹:业务版图从邮箱、游戏、新闻扩展至电商、娱乐等领域,在每个领域都做得风生水起。

网易AI路线

那AI呢?依然延续这个路数吗?

在BAT和各大公司纷纷把AI喊得响亮的当前,网易公司层面的AI声量显得克制。

不过,这种克制也将成为过去时。

没错,网易即将在AI方面搞出更大动作——依然会延续以慢打快的网易传统。

网易AI其实布局不算晚。

2011年,网易就在内部储备相关技术和团队,由浙江大学计算机博士李晓燕牵头。不过当时深度学习方兴未艾,AI也还没狂飙突进。所以网易AI更多扮演赋能网易内部各业务的角色,为游戏、邮箱、音乐、云服务和电商等业务持续提供AI技术加持,通过新交互形式的赋能,提升网易集团全线业务的产品竞争力和用户体验。

具体到技术方向层面,也先从更接近内部业务的CV开始,逐步切入语音语言、模式识别、人机交互、数据智能等领域并且在打造一个深度学习+机器学习平台。

于是2017年,风向标事件发生:网易的AI团队升级为人工智能事业部,并成为网易一级事业部,李晓燕出任总经理。可见网易在人工智能上的决心。

成立事业部后,网易AI继续内外并举。打法上同样点线面齐备,希望探索出更多落地场景。

在业务思路上,在3条战线上分别展开,分别是:基于视觉的网易AR、语音识别和NLP方向上的语音交互业务,以及AI平台。

其中,网易AR的商业化落地是网易AI的核心战略之一。

△网易洞见是网易AR基于移动端的AR平台

AI加持下的AR

为什么是AR?

有网易基因的原因,靠游戏安身立命,3D视觉原本就是网易一直以来的技术储备。

而且在AR游戏方面也已经真刀真枪上阵,推出了《悠梦》、《破晓唤龙者》2款游戏,甚至在Google AR开发者介绍案例中,网易的AR游戏也被拿来举例。

网易AR负责人赵辰认为,AR不仅是AI视觉技术的重要应用形式,也是打通虚拟世界和现实世界的重要手段,如果从信息承载和人机交互层面来看,意义更加不言而喻。

借助计算机视觉技术和可视化技术,可以实现在物理世界叠加虚拟信息,并将虚拟信息准确“ 放置” 在物理世界中。

如此一来,AR将改变人们获取信息、理解信息、应用信息的方式,是万物互联时代的信息入口,是人机交互的重要形态,也在承担网易AI探索“下一代终端用户交互形态”的使命。

技术挑战和方案

技术方面也长期为此准备。

网易AR算法负责人丛林介绍,网易洞见AR平台核心覆盖3个部分:一是AR内容浏览器,以客户端为载体;二是互联网应用引擎,为互联网应用提供AR平台能力;最后是游戏引擎,表现为AR Game Plugin。

其中互联网应用引擎,已具体涵盖了AR底层的定位、AR云端的服务,甚至多人联机、基于图片的跟踪识别、3D内容渲染等。特别在渲染部分,网易的SDK可以实现复杂精细的3D内容,比如用粒子特效来呈现风、水、火的效果。这些都得保证其互联网应用合作方的“终端用户”拥有“友好用户体验”,与网易产品的思路保持一致。

谈到网易洞见AR平台的优势,网易AR对三个方面引以为豪:

一是算法能力,结合计算机视觉、深度学习、人机交互和计算机图形学技术,实现系统级的算法优化,提供AR应用所需的基本场景内容理解能力,将虚拟物体精准注册于现实场景,并实现3D内容的精准展示:

丛林以光照恢复算法为例,具体做了解释。依托于深度学习和计算机视觉算法技术,光照恢复算法对当前环境的环境贴图、主光源方向、环境光亮度以及色温等参数进行恢复及预测。

具体而言,即:通过场景图像输入,利用深度神经网络预测出环境光的参数(SH系数)和周围的环境贴图,其中SH提供光照;环境贴图作为反射贴图可以让光滑物体映射的纹理更准确。由于学习得到的反射贴图准确性有限,所以把相机拍到的图像已知信息通过相机参数映射到环境贴图中,替换部分学到的环境贴图;预测的主光源方向可以为虚拟物体增加效果逼真的高光和阴影。此外,通过图像和相机信息实时计算环境光亮度、色温等参数,用来调整虚拟物体表面亮度和颜色,使得物体和环境更好地融为一体,使得渲染的结果更贴近真实。

二是内容生态支持,与国际级内容产业链进行深度合作,并与网易游戏生态进行整合,打造顶级、优质的AR内容生态。具体,如支持图片、文字、声音、视频、3D模型等AR内容展示的实时渲染,满足多元AR设计需求。

最后是系统性打磨,用户体验至上。以稳定低耗AR算法为例,支持基于图片的稳定识别与跟踪,支持无需标记物的实时场景跟踪和定位模式,可以多场景体验AR特效,在用户自然交互的同时实现大量主流机型稳定的AR体验。

此外,这套AR引擎的载体,还被不断普及化,覆盖各种硬件性能的终端,真正实现AR内容在终端用户的普及,并让用户真正体验到优质AR内容的乐趣。

赵辰介绍道,一个AR开发大爆发的时代已至前夜,开发底层引擎已ready,设备传感能力也已ready,只缺更多开发者和产业链合作方加入其中,掀起更大浪潮。

实际上,网易自身还在去年开启了牛刀小试,较具代表性的有2个。

一个是网易洞见、网易云音乐,与农夫山泉共同打造了一次AR营销。去年8月,网易云音乐&农夫山泉的4亿瓶“乐瓶”上,印上了精选乐评,手机一扫,AR实时呈现每一瓶矿泉水自带的音乐和故事,玩法之文艺及新颖,引发病毒式传播讨论。

另一个则是电影《异形》的营销,将电影IP变身蠢萌形象,让用户观影之外还能与继续在现实中与外星怪物互动。

不过,虽然初步试水的效果都不错,但赵辰也透露,“所见即所得”的AR红利还未被更多人看到,客户市场教育还需要进一步铺开。

接下来,网易方面希望在相关目标行业加快AR赋能节奏,并以四个行业为例解释了AR如何“赋能”场景。

广告营销行业,使得“万物皆媒介”,一切都可以成为体验式营销的入口;

游戏行业,增强了游戏的临场感,也为游戏玩法提供了丰富的想象空间;

新零售行业,提高运营的用户参与度,助力消费者决策;

生产培训行业,更好的学习体验,在真实世界中理解复杂信息。

这也是大洋流中的历史性要求:靠Demo、纯讲技术应用的时代已经过去——看货——是对于AI落地和商业化的核心诉求,而网易的初步答卷上,要率先以AR展开作答。

这几年来,网易教育做得有声有色,网易云音乐口碑日盛,网易考拉和严选也在电商领域打出组合拳,核心套路全一样:产品、产品,还是产品。

那么AI呢?AI加持下的AR呢?网易又会交出什么样的产品?

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Ar
    Ar
    +关注

    关注

    24

    文章

    4954

    浏览量

    167236
  • AI
    AI
    +关注

    关注

    87

    文章

    26129

    浏览量

    263712
  • 网易
    +关注

    关注

    0

    文章

    122

    浏览量

    14293

原文标题:网易依然要以慢打快,AI商业化AR是重要方向

文章出处:【微信号:gh_70d0cce81c74,微信公众号:网易人工智能】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    汽车网络安全-挑战和实践指南

    汽车网络安全-挑战和实践指南
    的头像 发表于 02-19 16:37 165次阅读
    汽车网络安全-<b class='flag-5'>挑战和</b>实践指南

    HDI 布线的挑战和技巧

    HDI 布线的挑战和技巧
    的头像 发表于 12-07 14:48 189次阅读

    DC/DC转换器功率降额规范中的挑战和替代方法

    DC/DC转换器功率降额规范中的挑战和替代方法
    的头像 发表于 11-23 09:08 217次阅读
    DC/DC转换器功率降额规范中的<b class='flag-5'>挑战和</b>替代方法

    面部表情识别技术挑战与解决方案

    面部表情识别是一项复杂的技术,面临着许多挑战,如表情的多样性和变化性、面部肌肉运动、光照条件等。本文将探讨面部表情识别技术挑战和解决方案,以促进该
    的头像 发表于 08-10 18:09 337次阅读

    面部表情识别的挑战和前景

    面部表情识别作为一项复杂的技术,面临着许多挑战,例如表情多样性、表情变化性、肤色和光照影响等。本文将探讨面部表情识别的挑战和前景,分析其发展方向和趋势。 首先,面部表情的多样性是面部表情识别面临
    的头像 发表于 08-02 18:21 527次阅读

    iPhone 8 Plus透明屏有哪些挑战和限制?

    iPhone 8 Plus透明屏是一种新颖的屏幕技术,可以给用户带来全新的视觉体验。它可以用于增强用户的视觉感受、提高手机的功能和保护用户的隐私。然而,透明屏也存在一些挑战和限制,需要进一步的技术改进和成本降低才能得到广泛应用。
    的头像 发表于 08-01 09:47 219次阅读
    iPhone 8 Plus透明屏有哪些<b class='flag-5'>挑战和</b>限制?

    利用陶瓷电路板优化信号要点:挑战和解决方案

    引言:在现代高速电子系统中,保持信号的缺陷和准确传输至关重要。信号缺陷问题可能导致失真、误操作和功率丢失信号等不良影响。为了解决这些问题,陶瓷电路板作为一种优质的材料选择,被广泛研究和评估信号缺陷。本文将探讨利用陶瓷电路板优化信号缺陷的挑战和解决方案,并介绍相关的技术进展
    的头像 发表于 07-10 14:56 288次阅读

    人脸识别技术挑战和未来发展

    人脸识别技术在实现过程中面临着一些挑战和问题。 首先,人脸识别技术需要具备高准确率和识别速度,以提高安全性和效率。然而,在实际应用中,受到多种因素的影响,如光照、角度、面部表情等,人脸识别技术
    的头像 发表于 06-28 18:07 459次阅读

    车载手势识别技术挑战和未来发展

    技术需要保障驾驶员的安全和隐私,避免手势动作的误识别或泄露个人信息等情况。此外,车载手势识别技术还需要考虑成本、耐用性和维护等问题。 为了应对这些挑战和问题,研究人员正在积极探索新的算法和技术
    的头像 发表于 06-27 18:25 291次阅读

    情感语音识别技术挑战和未来发展

    情感语音识别技术在实现过程中面临着一些挑战和问题。 首先,情感语音识别技术需要处理自然语言理解和语音识别等复杂的问题,如何提高技术的准确率和效率是该
    的头像 发表于 06-24 03:41 331次阅读

    TTS语音合成技术挑战和未来发展

    TTS语音合成技术在实现过程中面临着一些挑战和问题。 首先,TTS语音合成技术需要处理自然语言理解和语音识别等复杂的问题,如何提高技术的准确率和效率是TTS语音合成
    的头像 发表于 06-24 03:18 601次阅读

    人体分割识别图像技术挑战和未来发展

    人体分割识别图像技术在实现过程中面临着一些挑战和问题。 首先,人体分割识别图像技术需要处理复杂的人体图像,而这些图像往往存在着多种干扰因素,如光照、姿态、遮挡等,如何消除这些干扰因素的影响是人体分割
    的头像 发表于 06-15 18:04 366次阅读

    手势识别技术挑战和未来发展

    手势识别技术在实现过程中面临着一些挑战和问题。 首先,手势识别技术需要处理大量的手势信息,而这些手势信息的处理和分析需要耗费大量的计算资源,因此如何提高计算效率是手势识别技术需要解决的
    的头像 发表于 06-14 18:27 579次阅读

    人脸面部表情识别技术挑战和未来发展

    人脸面部表情识别技术虽然取得了一定的成就,但仍然面临着一些挑战和问题。 首先,光照、姿态和表情等因素都会影响到面部表情的识别准确率,需要进行更加深入的研究和处理;其次,对于某些复杂的情感,如惊讶
    的头像 发表于 06-06 16:53 381次阅读

    AI数据采集的挑战和解决方案

    AI数据采集的挑战主要包括数据供应不足、技术维护难度大、数据安全性和隐私性等问题。针对这些问题,我们可以采取以下解决方案
    的头像 发表于 05-10 17:24 818次阅读