0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI艺术表达 修复解锁经典与视听生活 张国荣《热·情》演唱会再现

脑极体 来源:脑极体 作者:脑极体 2022-04-06 21:04 次阅读

每年的4月1日,都会有千万人自发地去追思张国荣。或重温影视片段,或听经典曲目,在哥哥生前倾注的心血中持续不断获得动力与力量。

熟悉张国荣的粉丝,可能都了解哥哥生前最后的一场演唱会——《热·情》。这场演唱会由其亲自担任艺术总监,从艺术构思到剧情式的曲目编排,承载着他对华语歌坛的满腔热忱。在张国荣阔别19年后,尘封的《热·情》演唱会母带,在AI技术的修复下,与粉丝重逢。

4月1日 ,由腾讯云多媒体实验室领先算法团队修复、腾讯音乐娱乐集团携手环球音乐旗下厂牌宝丽金,并联合腾讯云、微信视频号、腾讯视频等多个团队联合呈现的“张国荣2000年《热·情》演唱会超清修复版”全球首播。数千万粉丝共同见证了AI技术加持下的这场风华绝代的演唱会。

视频修复并不是新鲜的事物,相信大部分读者之前在社交平台中都刷到过用AI修复百年前老北京影片的新闻。许多经典老片、大荧幕电影都经过AI技术的修复,被重新搬上了荧幕。AI技术修复视频影像资料此前大都集中在影视领域,对于演唱会这类视频资料的修复较少见。虽然都是修复视频,但演唱会和影视类的视频修复还是有着较大的区别。

视频修复中的“长尾”困境

视频修复包含物理修复和数字修复,前者指对于胶片本身的修复,包括去除杂质、形变、划痕等流程,后者则主要集中在基于机器学习深度学习这方面的全自动修复,AI技术的引入,在修复领域的核心价值就是尽可能用技术覆盖以前堆砌人力的方式,去减少人力与修复成本。

视频修复解决的是老旧影视资料中,画面雪花、划痕等造成视频素材清晰度、画面、色彩等造成的感官损失度感受。影视剧视频的修复,相对演唱会而言场景比较固定,镜头的运作以及整个画面比较稳定,从头到尾的艺术表达形式、整体的色彩风格比较统一。

但演唱会不一样,演唱会里面的灯光与画面镜头会有特别多的切换,尤其是在人脸修复方面,光影效果在现场看是助燃剂,但对于修复来说,就是复杂的“灾难”,对于修复的效果会造成特别大的影响。

脑极体跟此次《热·情》演唱会背后的修复技术专家也聊了下,有关演唱会修复背后的一些技术与故事。

腾讯多媒体实验室专家研究员夏珍介绍道,现在业界基本上很难找到基于视频的人脸修复,大部分的人脸修复只是基于图片或者单张照片,如果要用到视频上会遇到更多复杂的问题。比如每一帧中脸的角度不一样,如果是侧脸或者很小的脸以及很大的脸,各种角度和姿态的脸都需要在算法处理里面能够解决这些问题。

dee8d83586a9435cb47553ae405b6d9f~tplv-tt-shrink:640:0.image

e3f529f2b9f1420090f56d617a806339~tplv-tt-shrink:640:0.image

在演唱会修复中,不仅需要面对人脸本身的修复问题,还叠加了光影的影响。演唱会不仅有灯光并且颜色多变,打在人脸上后,如何运用智能算法,解决这些问题,是一项不小的挑战,并且在这其中,也会有技术不能解决的问题。

我们知道,在视频修复中,划痕和雪花点的数量越多,观赏的体验也就越差。修复领域,划痕的修复成本高昂,并且多数的划痕修复不可逆。并且业界也缺乏庞大的划痕公开数据库,这也使得算法难以调优,而搭建数据库的话,成本也非常昂贵。

演唱会这类视频的修复有着许多长尾问题,除了运用纯算法模型的方式之外,也需要一些人工参数的调整,比较费心思。

据腾讯多媒体实验室方面介绍,此次演唱会的修复工作用到的是实验室旗下的“超清沉浸感修复引擎”,这是面向老片修复场景的技术解决方案。整个演唱会的修复包括智能分析、画质修复、画质增强、智能编码四个步骤。通过多种AI评估算法对视频内容进行帧级别、场景级别和视频级别等多维度的智能分析。利用多种人工智能修复算法,针对老片场景下进行训练和优化,修复老片中常见的竖线、雪花点、噪声、压缩失真、抖动等问题。

d1e70fbae46646728c467283d7c0cfa9~tplv-tt-shrink:640:0.image

从整体画面的主观感受上来看,修复后比以前的画面更清晰、更真实。这种真实感来自画质整体的增强,包括分辨率、色彩、帧率等方面的提升。在张国荣近景特写中,我们能够明显感受到他脸部的轮廓、毛孔、胡子都比老版要清晰很多。用数据来表示效果也十分明显,之前母带分辨率只有720×480的分辨率,修复以后接近4K高清画质,分辨率提升了6倍,整个画面的流畅度也有所优化。

除了腾讯外,不少技术团队也在加码高清视频修复技术,给老旧影视资料带来视听效果效率与体验的多维优化。

老影像里的新生意

高清视频修复经典作品,近两年是许多流媒体开始投入去做的事情,如爱奇艺、优酷、西瓜视频等,这些平台都将AI技术修复视频作为新的增长领域开拓。

爱奇艺自主研发了 ZoomAI 视频增强技术,可以基于多个算法模型实现去划痕污渍、超分辨率、去噪锐化、智能插帧,并支持4K高清的沉浸式观影效果。

我们熟悉的老片《三毛流浪记》、红色电影《小兵张嘎》、《东方红》等140部经典影视也被爱奇艺重新修复为4K,搬上荧幕。为更好地推动经典修复的进程,爱奇艺也将高清视频修复作为未来发展的重点,启动了多个数字修复工程,联合产业与多个机构等,持续延续高清视频修复的公益与商业价值。

中影数字制作基地和中国科技大学,共同研发了一个基于 AI 的图像处理系统“中影·神思”。借助“中影·神思”系统,中影基地已经成功修复了《厉害了,我的国》《马路天使》《血色浪漫》和《亮剑》等多部影视剧。

中影数字制作基地修复中心主任对外披露,利用AI神思系统,修复一部电影的时间可以缩短四分之三,成本可以减少一半。

优酷也用阿里云的“画质重生”技术来修复老片。在优酷平台,修复的经典影视内容播放量增长迅速,苏有朋版本的《倚天屠龙记》一经修复,在优酷的播放量增长了450%。其他诸如《寻秦记》《士兵突击》《亮剑》等经典电视剧,经过AI视频修复后,都活跃在各大视频平台的榜单前列。

经典作品自带持久的生命力,许多经典影视,如金庸武侠剧、老港片、经典TVB剧等都有着巨量的翻新需求,这些经典影视的粉丝群体庞大,怀旧经典是许多人的爱好,谁还没个循环十来遍的爱剧呢?

修复老片不只是一种情怀,对于泛娱乐、流媒体领域来说也能够产生新的商业价值和新的商业模式。《超高清视频产业发展行动计划》显示,到2022年,超高清视频产业总规模要超4万亿元。超高清视频修复市场蕴藏着巨大潜力,让视听行业嗅到了藏在老影像里的新生意。目前它虽是一个公益市场,但也是个不能忽视的商业市场。

优质内容是各家视频网站角逐的核心,而经典老片如果可以低成本地大批量进行高清修复,意味着盘活了视频网站的资源库,可以吸引更多新用户的留存与会员付费的可能。

高清视频修复的技术与资源也会成为各家差异化的优势,AI技术能够将成本大幅降低,效率和效果大幅提升,通过技术手段可以弥补需求和供给之间的鸿沟。AI修复的背后,经典作品画质的改善,与新的智能设备、观看需求的匹配,会使得平台品牌与流量互相正向循环促进。

不止技术,更是艺术表达

高清视频的修复,不仅仅是在传媒、流媒体、泛娱乐等领域具备创造价值,其与普通大众之间,也逐渐缩短了距离。

西瓜视频将自己的AI修复技术,后台开放高清修复的功能给每一位普通用户,用户可以还原那些对自己有特殊意义的瞬间。如父母辈的一些结婚录像,小时候家庭聚餐的录影,咿咿呀呀学习说话的影像,十年前大学毕业的聚会视频等。这些多年前的模糊影像,都会在AI技术的加持下,重新鲜活起来。

AI技术修复老片,也并不是万能的,并不是可以解决所有的老片问题。据光明日报报道,中国电影资料馆对于老电影修复,有两组人员,一组是艺术专家组,另一组是技术专家组,两组人员缺一不可。

7e852f21c6dc4d91913cfed0f3d860ed~tplv-tt-shrink:640:0.image

(百年前的北京城AI修复前后效果对比,via大谷)

老电影的色彩,风俗等场景比较专业,需要艺术专业人员的把控。对老片的修复,并不是单纯地把色彩修得好看,需要讲究修旧如旧的氛围感。这方面的把握,AI 还很难做到令人满意。中影基地此前在修复彩色片《梁祝》时表示,其色调的浓稠就很难界定,需要多方专家一起来定夺。

在高清视频的修复中,“修旧如旧”也并没有什么行业参数之类的标准存在,对于“如旧”的把控,需要结合所修复资料的具体场景、具体艺术表达来界定。这个界定就比较主观,考察的是技术团队与版权合作方等对于艺术氛围的感觉。

在经典老片的修复过程中,不只是技术能力的释放,也是一门艺术行为的表达。毫无疑问,AI 会加速高清视频的修复,但也存在局限,无法取代专业电影修复师。

对于高清视频修复的未来,除了算法模型的打磨外,全息投影,VR360都是可能的发展方向。随着5G、高清智能设备端的普及,对于经典系列的画质与清晰度的适配,用户的要求也会越来越高,初阶的480p、1080p到4K,已经是标配,未来4 K 到8K,适配VR 设备的3D影像内容修复,会是厂商们发力的方向。

传媒、泛娱乐、AI技术只要如常青树一般发展,交叉领域的视频修复就会乘着这股东风飞向远方。无论是珍贵的经典、还是我们普通人曾经闪亮的瞬间,视频修复都会点亮这些曾经褪色的记忆,让旧时光重新鲜活起来,充实我们的生活。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    87

    文章

    26457

    浏览量

    264070
收藏 人收藏

    评论

    相关推荐

    AI孙燕姿成今年爆火歌手,这一时代眼见不实,耳听为虚

    。   这些AI足以以假乱真,通过技术将一首音乐以更换演唱者的方式来进行不同的演绎,不仅为歌坛带来了不一样的视听体验,同时也引发了行业对AI技术应用的思考。在
    的头像 发表于 05-15 07:50 2964次阅读

    2024三星家电新品发布会举行,以AI赋能未来家庭生活新体验

    产品。三星致力于以先进产品和创新解决方案引领行业发展潮流,凭借多样化的家电产品打造智慧新生活,并通过AI赋能视觉显示产品和数字家电,为家庭生活带来新体验,搭建起消费者心中充满未来感的“有AI
    的头像 发表于 03-18 15:53 132次阅读
    2024三星家电新品发布会举行,以<b class='flag-5'>AI</b>赋能未来家庭<b class='flag-5'>生活</b>新体验

    三星“有AI的科技∙艺术∙家”新品发布会重磅更新 AI赋能2024全系产品升级

    缤色铂格系列等全系生态产品。 三星致力于以先进产品和创新解决方案为消费者打造便捷舒适生活,凭借多样化的家电产品打造智慧新生活,并通过AI赋能视觉显示产品和数字家电,为家庭生活带来新体验
    的头像 发表于 03-18 10:10 1133次阅读
    三星“有<b class='flag-5'>AI</b>的科技∙<b class='flag-5'>艺术</b>∙家”新品发布会重磅更新 <b class='flag-5'>AI</b>赋能2024全系产品升级

    AI引领家居风尚,三星生活家电于AWE 2024呈现有爱的科技·艺术·家

    BESPOKE缤色铂格系列产品重磅亮相本届展会,展示以AI技术赋能家电行业未来发展的全新主张,为全体用户打造更有爱的科技·艺术·家。 AI赋能衣物洗涤 让生活更清新 随着人们对
    的头像 发表于 03-15 10:05 158次阅读

    AWE 2024盛大开幕:三星融合AI科技与艺术设计塑造全新理想家居

    、Lifestyle艺术电视新品,BESPOKE缤色铂格系列生活家电新品及新一代旗舰智能手机Galaxy S24系列等全场景生态产品重磅亮相,以再度进阶的AI技术和艺术化设计语言为智慧
    的头像 发表于 03-15 10:03 149次阅读

    演唱会荧光棒颜色怎么控制的

    演唱会荧光棒的颜色控制涉及到几个方面:荧光棒自身的设计、灯光师的控制技术以及音乐表演的氛围。 首先,荧光棒是一种可以发光的小棒状物品,它内部包含了电池、发光元件和电路等部件。荧光棒通常使用LED
    的头像 发表于 12-20 10:23 2880次阅读

    解锁每一款属于你的AI​,即刻预约Microsoft Ignite!

    解锁每一款属于你的AI​,即刻预约Microsoft Ignite! , 发表于 2023-11-13 08:00 , , 原文标题:解锁每一款属于你的AI​,即刻预约Microsof
    的头像 发表于 11-13 08:15 134次阅读

    LED显示屏+AI如何为文化、艺术及教育赋能

      LED显示屏+AI 如何为文化、艺术及教育赋能 2023/9/15-17 洲明基金会邀您莅临 中国慈展会是国内唯一的国家级、综合性、国际化的慈善行业盛会,也是继高交会、文博会之后,在深圳经济特区
    的头像 发表于 09-14 09:18 700次阅读

    先锋音乐节点亮广州太古汇七夕之夜, &quot;HELLO AI&quot; AI互动与新媒体艺术展惊艳亮相

    广州2023年8月23日 /美通社/ --"HELLO AI"AI互动与新媒体艺术展现于广州太古汇商场正式亮相,展览持续开放至2023年9月23日。本次展览引入了澳大利亚多媒体艺术团队
    的头像 发表于 08-23 05:00 670次阅读

    解锁暑假云端生活:NAS助你打造个性化体验

    暑假转眼过半,大家一定度过一段非常美好的时光吧。朋友圈被去各地旅游的、看各种演唱会的、各种各样的观影读后感刷屏...生活很精彩,但如何高效地管理、享受和分享自己的文件、照片和影音内容成为困扰我们
    的头像 发表于 08-18 09:37 268次阅读
    <b class='flag-5'>解锁</b>暑假云端<b class='flag-5'>生活</b>:NAS助你打造个性化体验

    前沿视听耀长安,三星Big Screen TV Pop-up西安站举行

    赋能科技·艺术·家。 全景瀑布赋能4D视听 “Big Screen 全景沉浸式体验馆”由一道飞流直下的瀑布组成,其周身的光影
    的头像 发表于 08-14 11:00 362次阅读
    前沿<b class='flag-5'>视听</b>耀长安,三星Big Screen TV Pop-up西安站举行

    联诚发LED透明屏和智慧荧光棒系列为全球各类舞台演绎增添活力与光彩

    演唱会现场大放异彩,陪伴粉丝朋友们一起共度盛宴。周董超多经典曲目,每一首歌曲都有“超燃”的视听感受,瞬间燃爆全场,更是让海口全城沸腾! 这几天,身处海口的每个人都真切地感受到了“好热闹”、“人好多呀”……周董
    的头像 发表于 07-03 16:06 398次阅读

    演唱会荧光棒有啥黑科技

    洞见分析经验分享
    电子发烧友网官方
    发布于 :2023年06月30日 11:44:38

    拆解:演唱会上万根荧光棒同步控制,它是怎么做到的?

    电子 发烧 友网报道(文/李诚)演唱会现场那充满活力且整齐划一的“荧光海”,不仅带给了众多歌迷强烈的视觉震撼和情感共鸣,更是在现场营造出了独特的氛围和互动效果。 那么,演唱会现场的荧光棒究竟是
    的头像 发表于 06-29 08:15 7670次阅读

    拆解:演唱会上万根荧光棒同步控制,它是怎么做到的?

    电子发烧友网报道(文/李诚)演唱会现场那充满活力且整齐划一的“荧光海”,不仅带给了众多歌迷强烈的视觉震撼和情感共鸣,更是在现场营造出了独特的氛围和互动效果。   那么,演唱会现场的荧光棒究竟是
    的头像 发表于 06-25 01:19 1.4w次阅读
    拆解:<b class='flag-5'>演唱会</b>上万根荧光棒同步控制,它是怎么做到的?