0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

经过6年的沉淀之后,如今AI在爱奇艺也是无处不在

电子工程师 来源:lq 2019-05-19 10:26 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

作为中国视频网站的巨头之一,爱奇艺一直被外界认为是中国版的Netflix,当然这种比喻主要是从内容的角度出发。

2017年,爱奇艺的《中国有嘻哈》成为现象级综艺节目;2018年,爱奇艺独占的《延禧攻略》又登上谷歌2018年度热搜词。可以发现,不管是内容制作和内容发现,爱奇艺的眼光可谓精准。

然而,Netflix擅长的不只是内容,而是技术+内容,在用户看来,Netflix是一家内容公司,但是支撑这家公司却是对技术的大力投入,特别是AI技术,不管是视频编解码,还是内容推荐等等。在流媒体时代到来之后,AI在Netflix已经无处不在。

经过6年的沉淀之后,如今AI在爱奇艺也是无处不在。

AI无处不在

在近日举行的爱奇艺世界大会上,爱奇艺展示了AI技术和落地应用。爱奇艺首席技术官兼基础架构和智能内容分发事业群总裁刘文峰介绍称,在爱奇艺的整个运营流程中,AI发挥的作用无孔不入,贯穿视频内容的创作、生产、理解、分发、播放到变现以及客服整个流程中。

首先以智能生产环节为例。爱奇艺的内容主要来自三个部分,一部分是传统的采买,另外一部分是自制剧,以及爱奇艺号等原创用户产生的一些内容。对于自制部分,爱奇艺采用AI打造了一个爱创媒资系统,这个系统主要是针对导演、制作人的创作痛点。内容创作者在后期制作的过程中往往会被一些非原创性的工作所影响,以至于没有办法集中精力,而且拍摄素材繁多,导致1~2个小时的综艺后期制作的时间往往要花上8~10天才能最终看到成片。通过使用身份识别、表情识别、镜头识别等AI技术,类似工作可缩短至数分钟,剪辑师可以很方便地从繁杂的素材中挑选精彩片段,效率提高20%-30%。

比如,导演想要成百上千个小时的素材里找到吴亦凡生气的特写,AI可能只需要三步就能解决:第一是身份识别,找出吴亦凡;第二是表情识别,识别出生气的表情;第三是镜头识别,识别特写镜头。这样就能很快把导演想要的片段找出来。

此外,拍摄片场里往往有几十个摄像机在同时拍摄,这样就会产生非常多路的素材,原来把这些素材按照自然时间精准对齐费时费力,但是有了AI技术可以把时间缩短到分钟级别。此外,爱奇艺还通过语音识别技术辅助字幕输出,大大提高了后期字幕制作的效率。今年的《青春有你》、《我是唱作人》等都已经落地了爱奇艺爱创媒资系统。除了辅助后期制作,爱奇艺提供的AI技术还可以按照模板自动利用精彩的素材生成优质的短视频内容,甚至可以通过分析BGM的节拍,按照节拍自动切换画面。

爱奇艺还打造了智能视频增强解决方案——ZoomAI。ZoomAI主要是针对影视作品进行画质修复和增强:首先,利用超分辨率技术解决分辨率低的问题;其次,利用去噪锐化解决有背景噪声和压缩噪声的问题;色彩增强则可以解决色彩灰暗的问题;针对帧率低的问题可以通过插帧的手段解决;由于胶片损伤导致的视频上有很多的划痕的问题则可以通过去划痕技术来解决。

在广告领域,爱奇艺也做了很多创新和探索,以减少片头广告对用户观看体验带来的不利影响。爱奇艺推出创可贴广告,通过AI识别视频里适合投放的广告点位。比如AI可以自动识别视频里的做饭场景,然后自动投放厨具品牌的广告;也可以通过AI识别明星身份,投放他的代言广告。

除了创可贴广告之外,爱奇艺还在探索非常多的新的广告形式,比如前情提要的广告,以及在精彩高能、集数播报的一些点位进行广告投放。比如在足球比赛直播时,AI能够实时分析画面,把进球的点位找出来,然后进行相应的广告投放。这些新的形式可以大幅提升广告效果和用户的观看体验。

在个性化领域,爱奇艺做的工作的也非常多,比如信息流推荐,比如搜索场景,比如短视频展示等等。为了能够真正实现个性化,爱奇艺除了采用综合模型,还会把用户的观看行为、互动模型和留存模型全部考虑进去。当然,不只是内容推荐可以千人千面,利用AI技术,爱奇艺还实现了电视或电影海报的千人千面。

此外,还有蒙版弹幕技术,能够实现“弹幕穿人过,爱豆心中坐”;HomeAI语音交互平台,通过智能搜索、智能跳转与百科问答等功能激活线上与线下场景之间的互动;AI雷达功能,可以智能识别人物、音乐、物品,用户还能即时扫码解锁产品信息并可实现购买行为等等。

不过技术不只是技术,也不只是为了商业,技术也是有温度的。为了帮助听障人士,爱奇艺推出了AI手语主播,它的工作原理是通过自动语音识别技术(ASR),准确识别视频中的语音并转换为文字,然后NLP技术将文字转换为手语内容,之后通过虚拟偶像进行输出。

整个产品把虚拟偶像和爱奇艺的ASR、NLP等AI技术进行结合,从而达到自动手语翻译的效果;通过爱奇艺AI的语义理解能力,AI手语主播能够对自然语言进行理解,并且智能翻译为手语表达;及其深度学习和训练则后续不断优化翻译效果。

2018年11月,爱奇艺发布的了适合娱乐场景的虚拟主播,今年爱奇艺将与华夏出版社、中国聋人协会和凤凰云祥等机构合作,研发适合严肃场景的新闻主播。

打破虚拟与现实的界限

除了无处不在的AI技术,爱奇艺也渴望冲破限制,让用户享受具有真实感和沉浸感观影体验。在这次大会上,爱奇艺还发布了奇遇VR系列新品——奇遇2S、奇遇2Pro、奇遇AR。

据介绍,奇遇2S VR一体机采用Real RGB 4K高清屏幕,同时采用无杂散光的非球面镜片,并基于显示屏的特性进行针对性优化,保证全视场的清晰度。奇遇2S VR一体机采用的是骁龙835,采用杜比及DTS双解码音效。

VR如何做到防眩晕一直是一个难题,爱奇艺奇遇VR将屏幕刷新率做到70HZ,同时优化了从头部运动到图像上屏的ATW反畸变、反色散的核心算法,在保证110度FOV的前提下,采用非对称光学设计,增加自适应IPD调节机制,以此缓解眩晕疲劳问题。

为了解决VR环境下的观影互动的高清晰度与流畅性,爱奇艺通过CDN技术与移动边缘计算系统(MEC)的融合,来保证用户的观影体验。

除了基本配置,丰富的VR内容也非常重要。营长现场亲自体验之后发现,爱奇艺除了拥有诸多高清片源之外,而且还有加入了很多小细节,比如爱奇艺在VR里设置了巨幕影院场景,让你在观影的时候仿佛置身电影院,非常新奇。

虽然大家对VR的前景可能仍有质疑,但是爱奇艺智能科技CEO熊文表示,随着5G商业化,2019年VR又将站上风口。

当然,虚拟与现实的界限除了观看方式,还需要增加互动。在此次大会上,爱奇艺还发布全球首个互动视频标准(Interactive Video Guideline,IVG),并计划推出协助互动视频生产的互动视频平台(Interactive Video Platform,IVP),并且公布国内首个带入式互动影视作品《他的微笑》也将上线。

根据介绍,爱奇艺发布的互动视频标准可以提供分支剧情、角色切换、画面信息探索等剧本结构设置,并提供与之对应的互动组件,从剧情设置到互动能力展现多个环节协助创作方制作互动影视内容。

也就是说,以后看视频,你可以决定剧情走向了。

编者手记

“虽然我们现在做的是媒体行业的事情,但是我们的核心是技术。爱奇艺是一个非常强的技术公司,从人员结构上接近一半的人是工程师,我们是同业公司里技术功底最高的公司。”爱奇艺创始人&CEO 龚宇此前接受采访时曾给爱奇艺定调。

2016年,爱奇艺的技术研发投入是8.2亿,2017年这一数字达到12.7亿,2018全年研发投入20亿人民币,比2017年增长57%。在刚刚发布的2019第一季度财报中,研发费用支出5.981亿元人民币(约合8910万美元),同比增长54%。这些数字足以说明爱奇艺对技术的重视。

创立9年,爱奇艺和Netflix越来越靠近,也越来越远离。共同点是对技术的重视和大力投入,不同点则是业务方向的偏离。

可以肯定的是,爱奇艺的未来已经没法再用Netflix来定义。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    89

    文章

    38162

    浏览量

    296850
  • ai技术
    +关注

    关注

    1

    文章

    1313

    浏览量

    25602
  • 爱奇艺
    +关注

    关注

    0

    文章

    88

    浏览量

    7101

原文标题:为什么说爱奇艺是一家技术公司?

文章出处:【微信号:rgznai100,微信公众号:rgznai100】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    数字IC/FPGA设计中的时序优化方法

    在数字IC/FPGA设计的过程中,对PPA的优化是无处不在的,也是芯片设计工程师的使命所在。此节主要将介绍performance性能的优化,如何对时序路径进行优化,提高工作时钟频率。
    的头像 发表于 12-09 10:33 1499次阅读
    数字IC/FPGA设计中的时序优化方法

    HarmonyOS 6正式发布,超能小一用就爱!

    10月22日,华为正式发布全新的HarmonyOS 6,鸿蒙智能体验全面跃升。小AI能力持续升级,从具备大模型能力的AI助手到能思考、更具真人感的系统级智能体小
    的头像 发表于 10-22 17:43 866次阅读

    使用瑞萨RUHMI工具实现AI模型部署过程

    AI无处不在。你部署AI,你的竞争对手也部署AI,几乎所有人都在做
    的头像 发表于 10-17 10:00 2359次阅读
    使用瑞萨RUHMI工具实现<b class='flag-5'>AI</b>模型部署过程

    AI赋能6G与卫星通信:开启智能天网新时代

    开启一个全新的通信时代。它不仅让卫星通信更加可靠、高效,更让全球通信网络真正实现\"无缝覆盖\"。 未来的智慧城市中,AI+6G+卫星将提供无处不在的高速连接,支持自动驾驶、远程
    发表于 10-11 16:01

    瑞萨AI模型部署工具演示教程

    AI应用的浪潮中,视觉AI无疑是最热门的领域之一。从智能家居到安防监控,从工厂自动化到自动驾驶,视觉技术的身影无处不在。然而,对于很多开发者来说,想要在本地实现
    的头像 发表于 09-23 10:12 1258次阅读
    瑞萨<b class='flag-5'>AI</b>模型部署工具演示教程

    Arm 洞察与思考:为什么 AI 向边缘迁移的速度超乎想象

    ,人们不再质疑边缘 AI 是否能实现规模化——它已然成为现实。 Arm 最新发布了《AI 效率热潮:更小的模型与加速的计算正驱动 AI 无处不在》报告,该报告深度解析了驱动这一转变的核
    的头像 发表于 08-11 14:43 4.2w次阅读

    揭秘AI背后的核心技术

    如今,人工智能(AI无处不在——它能回复邮件、推荐电影,甚至能写出令人信服的诗歌,足以让一位电子工程专业的学生摇身一变成为文学才子(剧透一下:无论是哪个专业,都无法让应届毕业生做好心理准备,去应对被算力超群的聊天机器人“降维打
    的头像 发表于 07-18 15:05 810次阅读

    5G室内覆盖面临哪些挑战

    电信行业已投入超过六时间部署5G网络。可以说,5G已相对成熟,如今无处不在,特别是北美地区。
    的头像 发表于 07-01 13:52 1355次阅读

    FPGA边缘AI中的应用

    从聊天机器人、内容生成到高级数据分析,AI无处不在。过去,大多数 AI 处理都在云端完成。然而,随着模型功能日益强大以及对实时洞察的需求持续增长,AI 正在向边缘转移。智能摄像头和
    的头像 发表于 06-24 09:31 1394次阅读

    静电无处不在,对医药行业有哪些影响?

    静电无处不在不同行业影响不同,对医药行业的影响主要是:灰尘吸附、影响称重、不易灌装这三个方面。下面是荣盛源整理的医药行业中的静电问题及解决方案1、振动盘送料机静电问题:产品若在有静电的情况下
    的头像 发表于 06-11 11:33 448次阅读
    静电<b class='flag-5'>无处不在</b>,对医药行业有哪些影响?

    首款鸿蒙笔记本电脑发布,生活办公有小开启智慧新体验

    终端领域的又一次突破性创新。小作为全场景的系统级智能体,此次鸿蒙电脑上的AI智慧体验更是迈入了一个新台阶,无处不在的全新交互、不断拓展的个人知识空间、高效的办公体验以及便捷的设备操
    的头像 发表于 05-20 10:05 1800次阅读

    新思科技推出新型ARC VPX6 1024位矢量处理器

    数字信号处理技术无处不在如今的设备常常配备数十个传感器,这些传感器采集的数据要经过筛选与聚合处理后,才能为人工智能(AI)模型所用。随着人工智能工作负载
    的头像 发表于 05-12 16:31 835次阅读
    新思科技推出新型ARC VPX<b class='flag-5'>6</b> 1024位矢量处理器

    科通技术推出DeepSeek+AI芯片全场景方案

    2025,随着DeepSeek新版本的开源,AI技术掀起了全球普及的浪潮。在这股浪潮中,AI芯片作为关键算力支撑,其应用场景不断拓展,从云端到本地,再到终端设备,AI芯片
    的头像 发表于 03-24 10:33 1066次阅读

    三星CES 2025大放异彩 全面展示无处不在AI魅力

    AI体验覆盖到用户日常生活的方方面面,让AI(人工智能)成为“每一天,无处不在(Everyday、Everywhere)”的体验。一直以来,无论是移动互联网时代
    的头像 发表于 01-14 12:26 610次阅读
    三星CES 2025大放异彩 全面展示<b class='flag-5'>无处不在</b>的<b class='flag-5'>AI</b>魅力

    NVIDIA展望2025AI的应用前景

    AI 正重塑着各行各业,从医疗健康到电信,从媒体娱乐到零售,其身影无处不在。NVIDIA 的多位专家从不同行业出发,对 2025 AI 的发展做出了诸多极具前瞻性的预测,并展望了
    的头像 发表于 01-03 11:43 1454次阅读