张飞软硬开源基于STM32 BLDC直流无刷电机驱动器开发视频套件,👉戳此立抢👈

生成对抗网络 vs 图像水印,去除效果理想

AI科技大本营 2019-06-26 14:01 次阅读

当前互联网飞速发展,越来越多的公司、组织和个人都选择在网上展示和分享图像。为了保护图像版权,大家都会选择在图像上打上透明或者半透明的水印。随着水印被广泛地使用,针对水印的各种处理技术也在不断发展,如何有效去除图像上的水印引发了越来越多人的研究兴趣。

今天的文章中,我们会介绍一种更为强大的水印去除器。这次我们借助生成对抗网络来实现,进一步提升水印去除器的性能,从而达到更为理想的去除效果。

生成对抗网络的前世今生

生成对抗网络(Generative Adversarial Networks,GAN),是由Ian Goodfellow等人在2014年首次提出。一般来说,生成对抗网络由两部分组成:生成器(Generator)和判别器(Discriminator)。生成器通过接收输入数据,学习训练数据的分布来生成目标数据。判别器通常是一个二分类模型,用来判别生成器生成数据的真假性。

我们可以将生成器和判别器看作互相对抗的双方,生成器的目的是令生成的数据尽可能的真实,让判别器无法区分真假;而判别器的目的是尽可能地识别出生成器生成的数据。在生成对抗网络的训练过程中,上面的对抗场景会持续进行,生成器和判别器的能力都得到了不断提升。训练的过程可以用如下公式表示:

其中G和D分别表示生成器和判别器,x为真实数据,z是生成器的输入数据。最后训练结束我们就可以使用生成器来生成以假乱真的数据。一个直观的生成对抗网络结构如下图所示。

生成对抗网络近些年被大量应用于计算机视觉领域,根据具体应用不同可以分为图像生成和图像转换两种类型的任务。图像生成可以看成是一种学后联想任务,其中的代表是图像自动生成模型(DCGAN),网络结构如下图所示。这类任务只给出我们希望生成的目标图像,此时生成器的输入是服从某一分布的噪声,通过和判别器的对抗训练,将其转换成目标图像的数据分布。

图像转换可以看成是一种目标引导任务,其中的代表是图像超分辨率模型(SRGAN),SRGAN的网络结构如下图所示。这类任务除了给出我们希望生成的目标图像外,还会给出转换前的原始图像,此时生成器的输入变为原始图像,生成器在和判别器的对抗训练过程中还要同时保证生成的图像和目标图像尽可能的相近。

       

生成对抗网络的发展非常迅速,近些年出现了各式各样GAN的变种,例如在训练上优化的WGAN和LSGAN,通过对输入添加条件限制来引导学习过程的Conditional GAN,图像生成任务中的BigGAN和StyleGAN,图像转换任务中的Pixel2Pixel和CycleGAN等等。期待未来生成对抗网络在计算机视觉领域给我们带来更多的惊喜。

生成对抗网络 vs 图像水印

上一节中我们介绍了生成对抗网络的核心思想和一些应用,现在我们尝试将生成对抗网络用于图像的水印去除。去水印的目的是将带水印的图像转变为无水印的图像,这本质上也是一种图像转换任务。

因此生成器的输入为带水印的图像,输出为无水印的图像;而判别器用于识别结果到底是原始真实的无水印图像,还是经过生成器生成的无水印图像。通过两者之间不断的对抗训练,生成器生成的无水印图像变得足够“以假乱真”,从而达到理想的去水印效果。

在实际的实践过程中,我们还做了一系列优化改进。下面我们分别介绍生成器和判别器的具体结构以及训练细节。在生成器的选择上,我们继续使用U-net网络结构,U-net通过在输入和输出之间添加跳跃连接,融合了低层级特征和高层级特征。与直接的编解码器结构相比,能够保留更多的图像背景信息,保证去除水印后的图像的真实性。

在判别器方面,我们使用了基于区域判别的全卷积网络。与传统的判别器直接输出整张图像的真假结果不同,我们通过对图像区域级别的判别,可以更好地对图像上的无水印和有水印部分进行区分。

此外,我们采用了Conditional GAN的思想,判别器在对原始真实的无水印图像和生成器生成的无水印图像进行区分的时候会加入带水印图像的条件信息,从而进一步提升生成器和判别器的学习性能。生成器和判别器的具体结构和细节如下图所示。

生成器生成的无水印图像除了要令判别器分辨不了真假之外,还需要保证和真实的无水印图像尽可能接近。为此我们组合一范数损失(L1 Loss)和感知损失(Perceptual Loss)作为内容损失,在生成器和判别器对抗的过程中加入训练。最终的损失函数为

其中的条件对抗损失为

最终我们使用生成器作为水印去除器实现图像上的水印去除。为了对比和单一全卷积网络实现的水印去除器的效果,我们可视化了一些去水印结果,左列是输入的水印区域,中间列是单一全卷积网络得到的无水印区域,右列是生成对抗网络得到的无水印区域。从可视化的结果可以看出,经过对抗训练后的生成器对水印的去除效果更优。

写在最后

图像水印去除问题吸引了越来越多人的研究兴趣,本篇文章介绍了如何利用生成对抗网络来实现水印自动去除。去水印研究的目的是为了验证水印的鲁棒性,更好地提升水印的反去除能力。如何设计一种AI去不掉的水印是一个极具挑战的问题,接下来我们会在这方面做一些尝试,希望能够为版权保护尽一份力。

原文标题:基于GAN的图像水印去除器,效果堪比PS高手

文章出处:【微信号:rgznai100,微信公众号:AI科技大本营】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
分享:

评论

相关推荐

半导体原料明日之星砷化镓、氮化镓产业分析

半导体原料共经历了三个发展阶段:第一阶段是以硅 (Si)、锗 (Ge) 为代表的第一代半导体原料。
的头像 宽禁带半导体技术创新联盟 发表于 08-22 09:52 249次 阅读
半导体原料明日之星砷化镓、氮化镓产业分析

半导体工艺技术的发展趋势是什么?

业界对哪种半导体工艺最适合某一给定应用存在着广泛的争论。虽然某种特殊工艺技术能更好地服务一些应用,但其它工艺技术也有很大...
发表于 08-20 08:01 39次 阅读
半导体工艺技术的发展趋势是什么?

氮化镓元件对于5G基地台需求加持,稳懋摆脱贸易战阴霾

砷化镓(GaAs)及氮化镓(GaN)晶圆代工龙头稳懋公告2019年第二季营收情形,营收金额来到1.4....
的头像 联发科技 发表于 08-15 14:51 142次 阅读
氮化镓元件对于5G基地台需求加持,稳懋摆脱贸易战阴霾

神奇的GAN,基于生成的探索

科学家认为机器学习和人工智能所运用的前沿技术,是一种研究科学的全新方法。
的头像 人工智能学家 发表于 08-15 09:36 194次 阅读
神奇的GAN,基于生成的探索

GaN技术能为电源管理做什么?

我们可以想象一下:当你驾驶着电动汽车行驶在马路上,电动车充电设备的充电效率可以达到你目前所用充电效率的两倍;仅有一半大小...
发表于 08-09 07:10 459次 阅读
GaN技术能为电源管理做什么?

栅极驱动器隔离栅的耐受性能怎么样?

在高度可靠、高性能的应用中,如电动/混合动力汽车,隔离栅级驱动器需要确保隔离栅在所有情况下完好无损。随着Si-MOSFET/...
发表于 08-09 07:03 279次 阅读
栅极驱动器隔离栅的耐受性能怎么样?

氮化镓GaN技术怎么实现更高的功率密度

从“砖头”手机到笨重的电视机,电源模块曾经在电子电器产品中占据相当大的空间,而且市场对更高功率密度的需求仍是有增无减。 ...
发表于 08-06 07:20 57次 阅读
氮化镓GaN技术怎么实现更高的功率密度

一本书来帮助你入门深度学习生成模型

这一事实并没有真正公正地反映AGC的辉煌。由于摩尔定律,你可以选择任何计算机器,也可以说50年后,将....
的头像 新智元 发表于 08-02 08:57 274次 阅读
一本书来帮助你入门深度学习生成模型

Si衬底GaN基功率开关器件的发展状况

在电力电子控制系统中,为了保证系统失效安全,器件必须具备常关型的工作特性。
的头像 创伙伴 发表于 08-01 15:08 415次 阅读
Si衬底GaN基功率开关器件的发展状况

干货 | GaN在开关电源设计中的应用

随着工艺的进步和缺陷率的不断降低,GaN在交直流电力转换、改变电压电平、并且以一定数量的函数确保可靠....
的头像 创伙伴 发表于 08-01 15:01 320次 阅读
干货 | GaN在开关电源设计中的应用

GaN功率电子器件的技术路线

目前世界范围内围绕着GaN功率电子器件的研发工作主要分为两大技术路线,一是在自支撑Ga N衬底上制作....
的头像 GaN世界 发表于 08-01 15:00 254次 阅读
 GaN功率电子器件的技术路线

如何解决5G通信高带宽和大功率的射频技术挑战?

数据显示,全球4G/5G基站市场规模将在2022年达到16亿美元,其中用于Sub-6GHz频段的M-MIMO PA器件年复合增长率将达到...
发表于 08-01 08:25 113次 阅读
如何解决5G通信高带宽和大功率的射频技术挑战?

什么是LNA和PA?有哪些基本原理?

对性能、微型化和更高频率运行的推动正在挑战无线系统的两个关键天线连接元器件的限制:功率放大器(PA) 和低噪声放大器(LNA...
发表于 08-01 07:44 110次 阅读
什么是LNA和PA?有哪些基本原理?

氮化镓技术在半导体行业中处于什么位置?

从将PC适配器的尺寸减半,到为并网应用创建高效、紧凑的10 kW转换,德州仪器为您的设计提供了氮化镓解决方案。LMG3410和L...
发表于 08-01 07:38 31次 阅读
氮化镓技术在半导体行业中处于什么位置?

为什么GaN会在射频应用中脱颖而出?

镓(Ga) 是一种化学元素,原子序数为31。镓在自然界中不存在游离态,而是锌和铝生产过程中的副产品。GaN 化合物由镓原子和氮原...
发表于 08-01 07:24 92次 阅读
为什么GaN会在射频应用中脱颖而出?

如何利用非线性模型帮助GaN PA进行设计?

氮化镓(GaN) 功率放大器(PA) 设计是当前的热门话题。出于多种原因,GaN HEMT 器件已成为满足大多数新型微波功率放大器...
发表于 07-31 08:13 135次 阅读
如何利用非线性模型帮助GaN PA进行设计?

如何精确高效的完成GaN PA中的I-V曲线设计?

作为一项相对较新的技术,氮化镓(GaN) 采用的一些技术和思路与其他半导体技术不同。对于基于模型的GaN功率放大器(PA) 设计...
发表于 07-31 06:44 30次 阅读
如何精确高效的完成GaN PA中的I-V曲线设计?

DeepMind把GAN又玩出了新花样!推出的是双视频判别器GAN

研究人员表示,由于“高效计算”组件和技术的使用,再加上新的定制数据集,他们训练出的最佳性能模型:双视....
的头像 新智元 发表于 07-27 07:37 167次 阅读
DeepMind把GAN又玩出了新花样!推出的是双视频判别器GAN

让照片“变脸”古典画像,俄罗斯 AI 换脸“神器” 爆红!

它会给人一种站在镜子前,好像有成千上万个伦勃朗、卡拉瓦乔和提香在画你的错觉。
的头像 AI科技大本营 发表于 07-24 08:45 551次 阅读
让照片“变脸”古典画像,俄罗斯 AI 换脸“神器” 爆红!

GaN在射频领域有哪些优势?

氮化镓是一种二元III/V族直接带隙半导体晶体,也是一般照明LED和蓝光播放器最常使用的材料。
的头像 Qorvo半导体 发表于 07-23 17:42 1043次 阅读
GaN在射频领域有哪些优势?

利用语音直接画出人脸,AI再添新能力

听声辨人,利用声纹进行解锁,这种技术已广泛应用,人类的声音含有该个体的一定特征,从而可以进行区分。
的头像 DeepTech深科技 发表于 07-17 09:54 415次 阅读
利用语音直接画出人脸,AI再添新能力

技术 | 东北大学团队开发出低电流下也可高效发光的GaN Micro LED!

也适应于分辨率为2000ppi以上的显示屏
的头像 CINNO 发表于 07-15 10:22 476次 阅读
技术 | 东北大学团队开发出低电流下也可高效发光的GaN Micro LED!

TP65H050WS GaN场效应晶体管的数据手册免费下载

TP65H050WS 650V,50MΩ氮化镓(GaN)场效应晶体管是一种通常关闭的器件。它结合了最....
发表于 07-15 08:00 70次 阅读
TP65H050WS GaN场效应晶体管的数据手册免费下载

能不能用GAN破解标注数据不足的问题呢

在计算机视觉领域,深度学习方法已全方位在各个方向获得突破,这从近几年CVPR 的论文即可看出。但这往....
的头像 AI科技大本营 发表于 07-14 11:58 436次 阅读
能不能用GAN破解标注数据不足的问题呢

BigBiGAN问世,“GAN父”都说酷的无监督表示学习模型有多优秀?

BigBiGAN是一种纯粹基于生成模型的无监督学习方法,它在ImageNet上实现了图像表示学习的最....
的头像 AI科技大本营 发表于 07-11 15:48 372次 阅读
BigBiGAN问世,“GAN父”都说酷的无监督表示学习模型有多优秀?

能生成Deepfake也能诊断癌症,GAN与恶的距离

那么,技术本身就存在原罪么?又是哪里出了错呢?
的头像 大数据文摘 发表于 07-09 10:17 392次 阅读
能生成Deepfake也能诊断癌症,GAN与恶的距离

学不好人工智能,你连个披萨都做不出来?!

高科技做食物,或许可以激励吃货们的学习热情?
的头像 网易智能 发表于 07-09 10:07 383次 阅读
学不好人工智能,你连个披萨都做不出来?!

为什么这么多人看好氮化镓?

GaN属于第三代高大禁带宽度的半导体材料,和第一代的Si以及第二代的GaAs等前辈相比,其在特性上优....
的头像 第一手机界 发表于 07-01 15:16 524次 阅读
为什么这么多人看好氮化镓?

聚焦 | GaN产业规模有望突破200亿美元

近年来,由于氮化镓(GaN)在高频下的较高功率输出和较小的占位面积,GaN已被RF工业大量采用。
的头像 GaN世界 发表于 07-01 15:13 427次 阅读
聚焦 | GaN产业规模有望突破200亿美元

DeepNude惊现!一键“脱衣”

人工智能的黑暗面能有多黑?
的头像 大数据文摘 发表于 07-01 09:54 11486次 阅读
DeepNude惊现!一键“脱衣”

GaN产业规模有望突破200亿美元

近年来,由于氮化镓(GaN)在高频下的较高功率输出和较小的占位面积,GaN已被RF工业大量采用。
的头像 旺材芯片 发表于 06-30 12:53 1091次 阅读
GaN产业规模有望突破200亿美元

GaN已被RF工业大量采用有望突破200亿美元

近年来,由于氮化镓(GaN)在高频下的较高功率输出和较小的占位面积,GaN已被RF工业大量采用。根据....
的头像 电力电子技术与新能源 发表于 06-29 10:09 849次 阅读
GaN已被RF工业大量采用有望突破200亿美元

行业 | 功率半导体需求旺,预计2030年SiC增长10倍,GaN翻至60倍

预计2030年(与2018年相比)SiC成长10倍,GaN翻至60倍,Si增长45.1%。
的头像 宽禁带半导体技术创新联盟 发表于 06-28 16:03 452次 阅读
行业 | 功率半导体需求旺,预计2030年SiC增长10倍,GaN翻至60倍

功率半导体需求旺 预计2030年SiC增长10倍,GaN翻至60倍

据日本富士经济(Fuji Keizai)6月发布功率半导体全球市场的报告预估,汽车,电气设备,信息和....
的头像 渔翁先生 发表于 06-25 11:22 4143次 阅读
功率半导体需求旺 预计2030年SiC增长10倍,GaN翻至60倍

一种基于对抗生成模型的新方法,名曰“CosmoGAN”

不过最近,“基于神经网络的深度生成模型的进步,让许多类型的模拟器(包括宇宙学中的模拟器)构建性能更强....
的头像 新智元 发表于 06-23 10:05 666次 阅读
一种基于对抗生成模型的新方法,名曰“CosmoGAN”

间谍用GAN生成“红发美女”!

利用人工智能技术生成虚拟形象,给其赋予真实身份(智库从业者)、样貌(一般是年轻女性),并利用这一身份....
的头像 大数据文摘 发表于 06-21 11:06 629次 阅读
间谍用GAN生成“红发美女”!

无所不能的“GAN”究竟是什么?

虽然近期对GAN存在着大量炒作,但它显然是近年来从AI领域出现的最有趣的新概念之一,我们可以期待在不....
的头像 新智元 发表于 06-19 17:27 871次 阅读
无所不能的“GAN”究竟是什么?

QORVO®通过10W Ka波段GaN放大器打破功率屏障

移动应用、基础设施与国防应用中核心技术与 RF 解决方案的领先供应商 Qorvo®, Inc.宣布,....
的头像 宽禁带半导体技术创新联盟 发表于 06-17 16:38 622次 阅读
QORVO®通过10W Ka波段GaN放大器打破功率屏障

DeepFake换脸术混淆视听 搅乱美国政坛

最近,DeepFake 技术又一次站在了风口浪尖上。不只是因为它能在小电影上移花接木,而是立法者终于....
的头像 DeepTech深科技 发表于 06-17 09:35 571次 阅读
DeepFake换脸术混淆视听 搅乱美国政坛

清华刘永进提出APDrawingGAN ,GAN秒变肖像画!

但是,这些已有方法多数针对于生成信息较为丰富的风格,如油画,这些风格的图像中包含很多零碎的图形元素(....
的头像 新智元 发表于 06-15 09:26 842次 阅读
清华刘永进提出APDrawingGAN ,GAN秒变肖像画!

科技是把双刃剑:令人担心的事情还是发生了

据称,凯蒂·琼斯(Katie Jones)在一个高级智库工作, 与政治专家和政府内部人士联系在一起。....
的头像 新智元 发表于 06-15 09:11 1288次 阅读
科技是把双刃剑:令人担心的事情还是发生了

干货 | 一文了解 SiC/GaN 功率转换器驱动

基于碳化硅(SiC)、氮化镓(GaN)等宽带隙(WBG)半导体的新型高效率、超快速功率转换器已经开始....
的头像 电机控制设计加油站 发表于 06-13 11:45 857次 阅读
干货 | 一文了解 SiC/GaN 功率转换器驱动

清华大学教授提出APDrawingGAN,人脸照片秒变艺术肖像画

利用AI技术自动地将人脸照片转换为高质量的艺术肖像画
的头像 大数据文摘 发表于 06-13 10:00 1171次 阅读
清华大学教授提出APDrawingGAN,人脸照片秒变艺术肖像画

Small Cell和手机PA或可成为GaN应用蓝海

在接下来的2020、2021、2022年将会是5G器件急剧爆发的一个年份。
的头像 GaN世界 发表于 06-09 17:38 611次 阅读
Small Cell和手机PA或可成为GaN应用蓝海

5G时代,GaN市场将被引爆?

半导体技术在不断提升,端设备对于半导体器件性能、效率、小型化要求的越来越高。
的头像 宽禁带半导体技术创新联盟 发表于 06-08 17:39 1038次 阅读
5G时代,GaN市场将被引爆?

5G冰山之下 潜藏着你未意识到的GaN应用巨大机遇

“如果2019年5G的预商用布站可以开始,一切比较顺利。那么在接下来的2020、2021、2022年....
的头像 宽禁带半导体技术创新联盟 发表于 06-04 15:39 714次 阅读
5G冰山之下 潜藏着你未意识到的GaN应用巨大机遇

纳米线传感器“长”出来了,传感芯片即将到来

该技术首次实现了“无漏电流”GaN桥接纳米线,研制出的GaN纳米线气体传感器将推动传感芯片的发展。
的头像 人工智能学家 发表于 06-03 14:35 968次 阅读
纳米线传感器“长”出来了,传感芯片即将到来

SiC和GaN对传统Si功率电子的影响

由于半导体制程的不断精进,数位逻辑晶片的电晶体密度不断增高,运算力不断增强,使运算的取得愈来愈便宜,....
的头像 GaN世界 发表于 05-30 17:08 537次 阅读
SiC和GaN对传统Si功率电子的影响

DeepMind提出一种全新的“深度压缩感知”框架

深度压缩感知(DCS)框架通过联合训练生成器和通过元学习优化重建过程,显著提高了信号恢复的性能和速度....
的头像 新智元 发表于 05-25 09:25 675次 阅读
DeepMind提出一种全新的“深度压缩感知”框架

对水印各种处理显得越来越重要 比如水印的检测和去除与反去除

水印作为一种保护版权的有效方式被广泛地应用于海量的互联网图像,针对水印的各种处理显得越来越重要,比如....
的头像 电子发烧友网工程师 发表于 05-24 10:30 1100次 阅读
对水印各种处理显得越来越重要 比如水印的检测和去除与反去除

法国Soitec半导体公司3,000万欧元收购EpiGaN nv

预计未来五年内,GaN技术的市场应用规模将达到每年50万至一百万个晶圆。
的头像 GaN世界 发表于 05-21 16:26 971次 阅读
法国Soitec半导体公司3,000万欧元收购EpiGaN nv

RF功率半导体2018年突破15亿美元,GaN推动市场上扬

ABI Research公司发现, 2018年,RF功率半导体(4 GHz和3W)的支出继续增长,超....
发表于 05-20 09:13 493次 阅读
RF功率半导体2018年突破15亿美元,GaN推动市场上扬

Micro LED | 全球首款GaN-on-Silicon 0.7吋单片全高清显示屏推出

Plessey是一家面向增强和混合现实(AR / MR)显示应用且拥有最前沿Micro-LED技术的....
的头像 CINNO 发表于 05-17 16:55 713次 阅读
Micro LED | 全球首款GaN-on-Silicon 0.7吋单片全高清显示屏推出

GAN 的又一次完美应用!AI生成虚拟模特全身照

网友们纷纷惊呼,模特真的要失业了?!
的头像 电子发烧友网工程师 发表于 05-17 16:04 1004次 阅读
GAN 的又一次完美应用!AI生成虚拟模特全身照

Soitec收购EpiGaN nv,氮化镓(GaN)材料加入优化衬底产品组合

Soitec宣布收购EpiGaN nv,增强其优化衬底产品组合氮化镓(GaN)材料优势,此次收购将加....
发表于 05-16 09:17 251次 阅读
Soitec收购EpiGaN nv,氮化镓(GaN)材料加入优化衬底产品组合

Jurgen:我比GAN之父提前三年想到生成式对抗网络

GAN的身世之谜。
的头像 电子发烧友网工程师 发表于 05-14 10:19 535次 阅读
Jurgen:我比GAN之父提前三年想到生成式对抗网络

到底谁才是发明了GAN的男人?

比如一个草原的照片上有一块污渍,我们知道被盖住的部分(缺失的数据)也是草,那么我们就可以训练神经网络....
的头像 新智元 发表于 05-14 08:53 701次 阅读
到底谁才是发明了GAN的男人?

有一位小哥研究了一个名为DeOldify的工具,可以让黑白老电影以及老照片复原其本色

除了提高视频的稳定性,还有一件有趣的事情值得一提。事实证明,运行的模型,甚至是不同的模型和不同的训练....
的头像 新智元 发表于 05-11 09:27 987次 阅读
有一位小哥研究了一个名为DeOldify的工具,可以让黑白老电影以及老照片复原其本色

一文知道RF GaN市场蓬勃发展的关键

据麦姆斯咨询介绍,近年来,由于氮化镓(GaN)在射频(RF)功率应用中的附加价值(例如高频率下的更高....
的头像 MEMS 发表于 05-10 17:15 877次 阅读
一文知道RF GaN市场蓬勃发展的关键

深圳目标2023年IC销售突破2000亿 六大策略助力产业增长

日前,深圳市人民政府办公厅印发《深圳市进一步推动集成电路产业发展行动计划(2019-2023年)》(....
发表于 05-10 10:08 293次 阅读
深圳目标2023年IC销售突破2000亿 六大策略助力产业增长