0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

有一位小哥研究了一个名为DeOldify的工具,可以让黑白老电影以及老照片复原其本色

DPVg_AI_era 来源:lq 2019-05-11 09:27 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

黑白老照片上色已经不足为奇了,但是让黑白老电影还原彩色还是非常新鲜有趣的意见事情。近日,Twitter上有一位小哥研究了一个名为DeOldify的工具,可以让黑白老电影以及老照片复原其本色。

谁说经典只属于黑白?

最近,一位名叫Jason Antic的小哥在Twitter上大火了一把,它创建的DeOldify工具,可以让过去的黑白视频和照片秒变彩色。

这个神器一出,可把网友们高兴坏了,纷纷开始玩儿了起来。目前在GitHub上5800+星,相当火爆!

卓别林的电影瞬间年轻、有“味道”了许多。

1960年的经典电影《Psycho》:

1936年的经典电影《Reefer Madness》:

1927年的经典电影《Metropolis》:

DeOldify不仅能让视频恢复色彩,还能让黑白老照片秒变彩照。

《移民母亲》,Migrant Mother byDorothea Lange (1936)

"Toffs and Toughs" by Jimmy Sime (1937)

中国鸦片吸食者(1880)

这些黑白的视频和照片,当换上了彩色的“衣服”时,不得不说拉近了与我们的距离,并不觉得那么得有年代感了。

读者们可以手动试试为黑白老照片添色了!地址如下:

https://colorize.cc/

只需要从本地上传或者添加图片的链接,输入邮箱即可收到,非常的方便。

新智元便试了一下“慈禧太后”的黑白照,结果如下:

可以说,是相当的逼真了!

神奇的DeOldify背后的利器:NoGAN

作者在GitHub中提到,DeOldify中至关重要的就是NoGAN。NoGAN训练结合了GAN训练的优点(绚烂的色彩),同时消除了令人讨厌的副作用(如视频中闪烁的物体)。作者表示视频是使用孤立的图像生成,没有任何形式的时间建模附加。该过程执行30-60分钟的GAN部分的“NoGAN”训练,一次使用1%到3%的imagenet数据。然后,与静态图像着色一样,在重建视频之前,对单个帧进行“去旧化”。

除了提高视频的稳定性,还有一件有趣的事情值得一提。事实证明,运行的模型,甚至是不同的模型和不同的训练结构,都或多或少地得出相同的解决方案。你可能认为有些东西的颜色是随意的、不可知的,比如衣服的颜色、汽车的颜色,甚至是特效(就像《大都会》里看到的那样)。

作者对此的猜测是这些模型正在学习一些有趣的规则,关于如何根据黑白图像中出现的细微线索来着色。这个结果导致了非常确定和一致的结果,这意味着你没有跟踪模型着色决策,因为它们不是任意的。此外,它们看起来非常健壮,所以即使在移动场景中渲染也是非常一致的。

那么NoGAN是什么呢?

这是作者开发的一种新型GAN训练模型,用来解决之前DeOldify模型中出现的一些关键问题。

它提供了GAN训练的好处,同时花费最少的时间进行直接的GAN训练。在非常短的实际GAN训练期间,发生器不仅获得了过去需要数天逐步调整大小的GAN训练的完全逼真的着色能力,而且它也几乎没有产生任何GAN的“副作用”。据作者介绍,这是一种非常有效的新技术。

下图是原始DeOldify模型的效果,可以看出不同帧的颜色是存在差异的。

下面是基于NoGAN的DeOldify模型,可以看到着色效果非常好。

为什么是三个模型?

DeOldify现在有三种型号模型可供选择。每个都有关键优势和劣势,因此具有不同的用例。

更多细节内容可以访问查看GitHub:

https://github.com/jantic/DeOldify/blob/master/README.md

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 视频
    +关注

    关注

    6

    文章

    1999

    浏览量

    74647
  • GaN
    GaN
    +关注

    关注

    21

    文章

    2328

    浏览量

    79242
  • GitHub
    +关注

    关注

    3

    文章

    484

    浏览量

    18424

原文标题:GitHub5800星!一键还原百年老电影、黑白旧照片本色

文章出处:【微信号:AI_era,微信公众号:新智元】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    ALM(应用生命周期管理)解析:文了解概念、关键阶段及Perforce ALM工具推荐

    什么是ALM(应用生命周期管理)?它远不止是SDLC!文了解概念、关键阶段以及如何借助Perforce ALM这类工具,实现端到端的可追溯性、加速发布并保障合规性。
    的头像 发表于 09-19 11:03 1252次阅读
    ALM(应用生命周期管理)解析:<b class='flag-5'>一</b>文了解<b class='flag-5'>其</b>概念、关键阶段及Perforce ALM<b class='flag-5'>工具</b>推荐

    电影的背后,多少连接器在暗中撑腰?

    电影人用镜头守住故事,德索用连接器守住信号。 记录的是人类的情感与历史,保障的是信息与能量的流动。 而我——Ken,不只是卖连接器
    的头像 发表于 08-19 11:12 393次阅读
    <b class='flag-5'>一</b>部<b class='flag-5'>电影</b>的背后,<b class='flag-5'>有</b>多少连接器在暗中撑腰?

    照片视频太普通?涂鸦On-App AI黑科技,宠物/人像1秒C出片!

    很多人在拍旅游照、宠物照、生活照的时候,总觉得成片效果平淡无趣,缺少氛围感。想某个人物居中、给素材加特效,对手残党来说操作又极其复杂繁琐,折腾老半天,耗时又耗精力。那有没有种简单易用的工具,能
    的头像 发表于 08-14 18:55 892次阅读
    <b class='flag-5'>照片</b>视频太普通?涂鸦On-App AI黑科技,<b class='flag-5'>让</b>宠物/人像1秒C<b class='flag-5'>位</b>出片!

    套Linux系统,撑起整个芯片设计平台?CFA团队教你如何搭好EDA智算平台的技术底座

    工具、AI大模型、脚本工具,就必须有强大的软件包管理体系。 安装软件的作用仅仅是给该软件提供
    发表于 05-07 14:44

    在KiCad的PCB编辑其中,实用的工具可以用来清理布线与过孔

    在KiCad的PCB编辑其中,实用的工具可以用来清理布线与过孔。不仅可以移除没有使用的布
    发表于 05-06 21:57

    使用设计工具设计DIY PN5180 NFC模块,但它没有检测到NFC卡,为什么?

    我使用设计工具设计 DIY PN5180 NFC 模块,但它没有检测到 NFC 卡。为了排除故障,需要检查原理图和元件值是否存在可能的错误。由于我是 NFC 设计的新手、PN51
    发表于 04-01 06:27

    设置 KiCad 的视觉体验提升档次!

    “  不知道您有没有感觉到无论是原理图还是PCB,KiCad 没有商业软件看上去那么清晰?其实只需要手动改下这个设置,瞬间您的视觉体验提升档次!  ”     使用 KiCad
    的头像 发表于 02-17 11:17 1539次阅读
    <b class='flag-5'>一</b><b class='flag-5'>个</b>设置<b class='flag-5'>让</b> KiCad 的视觉体验提升<b class='flag-5'>一</b><b class='flag-5'>个</b>档次!

    VirtualLab Fusion应用:AR&amp;MR光波导器件的仿真研究

    灵活定义整体结构以及内外耦合器的不同区域。再加上它的非顺序模拟引擎,结合所有关键的物理效应,如偏振、孔径衍射和相干性,为光学工程师提供强大的工具,支持他们
    发表于 02-06 08:56

    OpenAI失信,未能在2025年之前提供opt-out工具

    早在 5 月份,OpenAI 就表示正在开发工具创作者可以指定他们希望自己的作品如何纳入或排除在其 AI 训练数据中。但 7 个月过去了,这项功能仍未面世。 OpenAI 当时
    的头像 发表于 01-17 11:10 575次阅读

    ADS1194调试串口输出,在定时间的转换后数据会少一位输出,为什么?

    调试的是ADS1194,每个/DRDY 接收转换数据并通过串口发送到串口助手中,先调试的CH1~CH4 通道,使用的是内部的Test_signal,增加了一位调试,即每进次/DRDY,调试
    发表于 01-07 07:30

    内部模式ADS8363里面有两AD,能AD工作在全差分,工作在伪差分吗?

    PDE只能控制工作2 x 2 fully-differential和4 x 2 pseudo-differential。 内部模式ADS8363里面有两AD,能
    发表于 01-02 07:57

    ADS1292R检测到DRDY下降沿的时候,读取数据,读出的数据每一位都代表什么啊?

    请教TI技术支持: 当检测到DRDY下降沿的时候,读取数据,读出的数据每一位都代表什么啊
    发表于 12-27 07:42

    AR&amp;MR光波导器件的仿真研究

    灵活定义整体结构以及内外耦合器的不同区域。再加上它的非顺序模拟引擎,结合所有关键的物理效应,如偏振、孔径衍射和相干性,为光学工程师提供强大的工具,支持他们
    发表于 12-23 09:07

    谷歌发布“深度研究”AI工具,利用Gemini模型进行网络信息检索

    据外媒最新报道,谷歌近期发布名为“深度研究”的先进AI工具。这款工具借助其内部的Gemin
    的头像 发表于 12-16 09:35 1035次阅读

    AR&amp;MR光波导器件的仿真研究

    灵活定义整体结构以及内外耦合器的不同区域。再加上它的非顺序模拟引擎,结合所有关键的物理效应,如偏振、孔径衍射和相干性,为光学工程师提供强大的工具,支持他们
    发表于 12-13 09:57