0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

揭开超画质黑科技的 “神秘面纱”

旷视MEGVII 来源:Megvii旷视科技 作者:Megvii旷视科技 2020-11-27 11:04 次阅读

发现美并记录美,是烙印在人类血液里的本能反应。从蒙昧时代的原始人在黑暗的洞穴中画下野生动物的第一笔涂鸦开始,绘画的火花激励着一代又一代人将美记录,随着历史的巨轮滚滚向前,西方世界的绘画向着古典主义对于细节的极致追求发展,而东方文明在山水写意中感悟着天地宇宙的本心……图像,对于人类来说,既在记录现实,也是人类思想的折射与反映。

从原始到现代的图像转变

科技始终伴随着人类文明的发展,使生活更加美好与鲜活。1839年,法国人达盖尔用两个木箱拼凑出世界上第一台相机,这种全新的摄影技术,渐渐地替代了绘画,成为记录美好瞬间的全新载体。如今181年过去了,形形色色的摄影摄像设备流淌过了人们的生活,无一例外,它们都忠实的履行了自己的使命——记录生活,记录美好。

在科技纵横发展的今天,人们对于将美的瞬间停留又有了更加极致的追求——在任何环境下都可以绝对还原景物的真我本色。由此,旷视的超画质技术应运而生。超画质是一种通过高画质数码相机的成像特性,还原景物原有的细节纹理的技术,可以对画面亮度、画面对比度、画面层次感、暗场细节、色彩精准还原进行升级,从而使得画面显得通透,层次更加丰富,照片的“观感”体验更加舒服。通俗点说,超画质技术就是让相机自动对照片进行“完美PS”的过程。

如果我们用一句话来定义超画质,那就应该是:在绝对尊重画面内容的同时,又赋予画面超越基础画质的美学提升。

揭开超画质黑科技的 “神秘面纱”

为了让超画质技术能够帮助大家拍出好照片,旷视的研发人员做了相当多的尝试,开发了100多种算法,实现了不少高级功能,我们就找几个好理解的聊一聊。

|高动态范围HDR,真正实现“五彩斑斓的黑”

拍夜景的时候,常常会出现一个悖论,同一幅画面里,我们既希望远处的天空背景暗一点,又希望近处的景物亮一点,这很难“一键解决”。旷视超画质技术中的高动态范围HDR,就是来解决这一矛盾的:它能够让图像明亮的地方更亮,黑色的地方更暗,将同一个画面里的亮度、色彩度处理得“更有层次”。

五彩斑斓的夜景

HDR是High Dynamic Range的缩写,即高动态范围。所谓动态范围,是一种用数学方式来描述场景中亮度层次范围的技术术语,也就是指一幅图像中最亮处和最暗处之间的比值。人眼所能感受的亮度范围大概为1/10³—10⁶nit,瞬时对比度可达10000:1,但是传统的照片却很难达到这一比例。HDR技术能够将画面整体亮度的动态范围大幅度扩展,不只是白色,而是立体空间中的各种色彩,从而提升拍摄画面的整体色彩空间。

在夜间摄影时,黑得“五彩斑斓”将再也不是什么笑谈。而常见的过度曝光或者逆光“黑脸”照片,也可以轻松被HDR解决。一句话解释,HDR就是帮你自动调整曝光,使每一张照片都光彩动人。

|降噪技术,画质好更要有细节

简单的科普一下:降噪是干什么?就是降低噪点。啥是噪点?就是图像里面的噪声,最简单的例子就是没信号的电视中闪烁的雪花。

电视画面中的雪花就是生活中常见的图像噪点(图源:网络

图像的噪点,最主要的来源是由光的散粒噪声引起的,常见的原因就是拍摄环境不行,可能是夜太黑,也可能是光太暗。

很多经常提到的词汇其实都跟噪点有关。比如画质,画质的技术术语是“信噪比”,是电子设备信号与噪点的功率谱之比,信噪比越高,给人的直观感受就是画质越好。降噪技术其实是通过对损害图像质感的斑点、边缘进行智能处理,从而压制噪点,让我们直观地感受到画质“提升”了。

在降噪的过程中,有一个大课题就是如何避免画面细节被损坏。比如我们拍一只猫,需要体现出猫的根根胡须、蓬松毛发,在细节处理上的难度非常大,稍不小心这些细节就伴随着噪点一起被处理掉了。一般的降噪技术,对于这种复杂边缘的处理,很容易导致“涂抹感”和“油画感”,虽然提升了画质,但是却损失了画面细节,不传神。旷视的超画质“黑科技”中,降噪技术基于旷视磨炼多年的AI算法,能够最大程度地保留细节同时提升信噪比。画质提升的同时,细节也能够清晰的表现出来。

降噪处理前后的猫咪

|图像增强,更智能地给图片 “划重点”

图像增强,增强的是图像中的那些有用信息。图像增强是有目的地强调图像的整体或局部特征,将原来不清晰的图像变得清晰、或者只把某些感兴趣的特征变清晰,扩大图像中不同物体特征之间的差别,从而改善图像质量、丰富信息量、突出画面重点。

图像增强技术在我们的“美图”生活中相当常见,在拍照或者处理图片时常用的“锐化”工具,提高图像中某一部位的清晰度,让某些区域的色彩更鲜亮,这就是图像增强技术最好的体现。

图像增强技术示意(左为原图,右为增强后)

图像增强技术的难点,在于每个人对于画面内容的要求和重点的选择是不一样的,如何自动分辨每一张图片需要突出哪些局部,这对技术提出了更高的要求。旷视的图像增强算法,能够更加准确地判断图像内容中需要突出的部分,从而让拍摄者能更轻松地拍出想要的感觉。

超画质技术背后的故事

从1.0到3.0,旷视算法工程师们的魔鬼训练

在超画质技术演进的求索之路上,旷视从未停止过脚步。旷视的研发人员始终相信,AI技术与数字图像的结合,将会产生神奇的化学反应,更好地解决现实中的痛点,从而带来实际价值。于是,如何不断完美超画质技术,成为了一道摆在一众算法工程师面前的大课题。

|从0到1的头脑风暴

大约是在2018年,在一次内部会议上,一位产品经理在他的PPT中首次提出了这个概念。萌生这个想法其实并没有什么曲折离奇的故事,就是因为现有的产品和技术,无法满足大家对照片的高要求,而且在那几年,手机厂商间的硝烟主要集中在摄像头的战场,敏锐的旷视人发现了这个问题和AI领域的契合点,于是就促成了计算机AI技术和传统摄影技术的一次神奇联姻。当然,头脑风暴之后就是旷视内部一次次地论证、分析与推演,终于,在2019年超画质技术1.0正式上线,摄影技术的新革命打响了第一枪。

超画质技术下夜晚的城市

|当算法工程师化身为见习摄影师

旷视超画质团队的算法工程师在上岗之前,需要接受一场严格的“审美培训”,这是一项不可避免的挑战。我们都知道,计算机的世界本源是0和1,是严格理性的科学推演,而对美的追求,却是从艺术出发,是人类先天感性思维的升华。旷视的超画质技术所追求的,是对艺术和科技的把控加以更为严格的标准,这就要求算法工程师同时还要有相当出色的艺术修养。为了更精准地了解用户需求,紧追时尚的潮流,旷视的算法工程师们经常组团钻研相机的新功能,从实践中理解什么才是更加优质的画面体验。

辛苦钻研的旷视算法工程师

|坚持第一性原理,深挖美的本质

旷视认为,技术落地要坚持第一性原理,从本质出发。解决超画质技术也不外如是,要从手机拍照时画面亮度偏暗/过曝、噪声过大、动态范围不佳等画质问题进行根本突破。

凭借在深度学习领域的积累和Brain++平台强大的能力,旷视超画质技术团队在业内首个推出AI+CV模式超画质算法,实现了画面品质的整体提升。在不到2年的时间里,旷视超画质技术已经从1.0迭代到3.0版本。如今旷视的超画质技术,不仅提供了百余种细节功能,实现了画面细节增强、动态范围提升、降噪效果升级等全局优化,还特别新增了闭眼融合修复、天空噪声优化、挥手鬼影优化等全新功能。简单来讲,手机有了旷视超画质技术,前置后置皆美丽,亮光暗光都清晰。

原画质到超画质3.0的转变

从古至今,人类一直在尝试找到一种可以100%还原本真、定格美丽的工具,并它必须易分享、好保存,从而能够向更多人展示生活的每一刻心动瞬间。如今,旷视的超画质技术应用在50多款主流手机中,正在让这个愿望距离实现更进一步。看了这么多美丽的照片,你还不抓紧拿起手机,记录下身边美丽的瞬间?

责任编辑:lq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 算法
    +关注

    关注

    23

    文章

    4448

    浏览量

    90721
  • 黑科技
    +关注

    关注

    14

    文章

    125

    浏览量

    36868
  • 旷视
    +关注

    关注

    0

    文章

    73

    浏览量

    6509

原文标题:聊聊旷厂黑科技 | 超画质,如何抓住最美的瞬间

文章出处:【微信号:megvii,微信公众号:旷视MEGVII】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    揭开快充芯片的神秘面纱

    UFP芯片是一种用于USB快充技术的关键元件,它在移动设备和充电器之间进行通信和协调,以实现高效、安全、快速的充电过程。下面我们将揭开快充芯片的神秘面纱,深入探讨UFP快充芯片的工作原理和功能。
    的头像 发表于 04-15 12:51 49次阅读

    UFP芯片-揭开快充芯片的神秘面纱

    什么是UFP芯片呢? UFP芯片是快充协议芯片的一种类型,主要应用场景为无线充电器、快充电动工具、快充诱骗线等领域。它与充电端(DFP)协议芯片和双角色端(DRP)芯片共同构成了快充协议芯片的主要类型。     UFP芯片的主要功能是什么? UFP芯片,即受电端协议芯片,是快充技术中的关键组件。它的主要功能是在快充过程中,与充电端(通常是充电器或充电设备)进行通信和协商,以确保安全、高效、快速地充电。 具体来说,UFP芯片在接收到充电请
    的头像 发表于 04-13 20:00 110次阅读
    UFP芯片-<b class='flag-5'>揭开</b>快充芯片的<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>

    AQY212S光耦合器:特性和应用揭秘

    让我们深入研究AQY212S的功能和应用,揭开这款令人印象深刻的器件的神秘面纱
    的头像 发表于 01-19 16:01 261次阅读
    AQY212S光耦合器:特性和应用揭秘

    AN-501推导时钟抖动引起ADC信噪比上限,为何信号没有取有效值?

    时钟抖动引起的采样噪声为: 计算SNR为: 为何这里不像《[MT-001_cn] 揭开公式(SNR = 6.02N + 1.76dB)的神秘面纱,以及为什么我们要予以关注》文章里那样,信号用
    发表于 12-01 08:30

    神秘又有趣的话题——芯片引脚顺序!

    亲爱的“芯”朋友,你们有没有发现,每颗芯片上都布满了密密麻麻的引脚,犹如一座迷宫,让人无从下手?今天,我们一起来揭开这个迷宫的神秘面纱,探索一下这个既神秘又有趣的话题——芯片引脚顺序!
    的头像 发表于 11-28 09:33 5138次阅读
    <b class='flag-5'>神秘</b>又有趣的话题——芯片引脚顺序!

    揭开高性能多路复用数据采集系统面纱

    电子发烧友网站提供《揭开高性能多路复用数据采集系统面纱.pdf》资料免费下载
    发表于 11-23 10:06 0次下载
    <b class='flag-5'>揭开</b>高性能多路复用数据采集系统<b class='flag-5'>面纱</b>

    深度学习算法和传统机器视觉助力工业外观检测

    在很多人眼里,深度学习是一个非常神奇的技术,是人工智能的未来,是机器学习的圣杯。今天深视创新带您一起揭开神秘面纱,了解什么才是深度学习。
    的头像 发表于 11-09 10:58 448次阅读
    深度学习算法和传统机器视觉助力工业外观检测

    iPhone15最新消息:取消静音拨片和刘海屏

    iPhone15系列即将在9月13日凌晨1点亮相。备受期待的iPhone 15系列也将揭开神秘面纱
    的头像 发表于 09-12 16:21 3386次阅读
    iPhone15最新消息:取消静音拨片和刘海屏

    揭开二手半导体设备公司的“神秘面纱

    已经发展得较为成熟,在中国市场也已经发展多年。但在国内二手半导体设备更像是一个“传说”,江湖中流传着它的事迹,却鲜少人报道。本文将揭开二手半导体设备的面纱,聊聊二手半导体设备的那些事。 01、“语焉不详”的二手设备 二
    的头像 发表于 08-21 09:31 441次阅读

    AI 揭开秘鲁沙漠大型地画的神秘面纱

    研究人员借助开创性的技术更快地发现藏在秘鲁大地上的神秘、古老的土地艺术——纳斯卡地画。 日本山形大学的研究人员利用 AI 在秘鲁首都利马以南 7 小时车程的纳斯卡发现了 4 幅以前从未见过
    的头像 发表于 07-18 17:35 211次阅读

    揭开POE技术神秘面纱

    POE指的是在现有的以太网 Cat.5 布线基础架构不作任何改动的情况下,在为一些基于 IP 的终端(如 IP 电话机、无线局域网接入点 AP、网络摄像机等)传输数据信号的同时,还能为此类设备提供直流供电的技术。
    的头像 发表于 06-19 10:35 280次阅读

    揭开R型变压器短路阻抗神秘面纱

    在日常的r型变压器运行过程中,常常会发现有一些性能因为没有选择好导致变压器在运行时出现不同故障,这将会直接影响到我们的工作效率。那我们在选择变压器的时候性能会对变压器的运行造成影响,如何避免呢,今天我们先来了解一下变压器短路阻抗是什么?
    的头像 发表于 06-13 15:14 381次阅读
    <b class='flag-5'>揭开</b>R型变压器短路阻抗<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>

    常用的典型电子电路知识

    这里从工作中最常用的几种电路揭开电子电路的“神秘面纱
    发表于 06-05 16:39 2121次阅读
    常用的典型电子电路知识

    揭开CXL的神秘面纱:概述

    CXL 是一种在主机(通常是 CPU)和设备(通常是附加了内存的加速器)之间实现高带宽、低延迟链接的技术。CXL 堆栈专为低延迟而设计,使用 PCIe 电气和附加卡的标准 PCIe 外形规格。CXL 使用灵活的处理器端口,可以自动协商到标准 PCIe 事务协议或备用 CXL 事务协议。
    的头像 发表于 05-26 10:33 3336次阅读
    <b class='flag-5'>揭开</b>CXL的<b class='flag-5'>神秘</b><b class='flag-5'>面纱</b>:概述

    揭开IDC机房神秘面纱-科兰

    互联网数据中心(Internet Data Center)简称IDC,就是电信部门利用已有的互联网通信线路、带宽资源,建立标准化的电信专业级机房环境,为企业、政府提供服务器托管、租用以及相关增值等方面的全方位服务。 IDC机房功能 IDC主机托管主要应用范围是网站发布、虚拟主机和电子商务等。比如网站发布,单位通过托管主机,从电信部门分配到互联网静态IP地址后,即可发布自己的www站点,将自己的产品或服务通过互联网广泛宣传;虚拟主机是单位通过托管主机,
    的头像 发表于 05-08 11:49 752次阅读