0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

英伟达新开源的工具它利用生成对抗网络,随便几个线条就能生成栩栩如生的图像

电子工程师 来源:lq 2019-04-29 15:30 次阅读

一个新手画家经常会出现自己想画的,和实际画出来的效果大相径庭的情况,但英伟达(NVIDIA)新开源的工具就厉害了,它利用生成对抗网络(GAN),随便几个线条就能生成栩栩如生的图像

使用该模型的互动应用程序被命名为GauGAN,以此来致敬印象派画家梵高。深度学习研究副总裁Bryan Catanzaro说:“通过简单的草图进行头脑风暴设计要容易得多,而且这种技术能够将草图转换成高度逼真的图像。”

Catanzaro将GauGAN背后的技术比作“智能画笔”,可以填充草图中的细节,粗略分割图是显示场景中物体位置的高级轮廓图。下图是一个NVIDIA样本输入和输出

还有这样的:

“这就像一张彩图图片描述了一棵树在哪里,太阳在哪里,天空在哪里,”卡坦扎罗说。“然后神经网络能够根据它对真实图像的了解,填充所有的细节和纹理,折射,以及阴影和颜色。”

GauGAN 背后的技术来自来自英伟达和 MIT 的研究团队。这个团队,包括来自英伟达的 Ting-Chun Wang、刘明宇(Ming-Yu Liu),Taesung Park (当时在英伟达实习),以及来自 MIT 的朱俊彦(Jun-Yan Zhu)。

目前,SPADE已经在GitHub上获得3616个Star,264个Fork。(GitHub地址:https://github.com/NVlabs/SPADE)

安装方法

克隆这个 repo

gitclonehttps://github.com/NVlabs/SPADE.gitcdSPADE/

此代码需要PyTorch 1.0和python 3+。需安装依赖项

pipinstall-rrequirements.txt

此代码还需要Synchronized-BatchNorm-PyTorch同步。

cdmodels/networks/gitclonehttps://github.com/vacancy/Synchronized-BatchNorm-PyTorchcpSynchronized-BatchNorm-PyTorch/sync_batchnorm.-rfcd../../

最后,如果你想要看见文中所展现的效果,你还需要一台有8个 V100 GPU 的 NVIDIA DGX1 机器。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • GaN
    GaN
    +关注

    关注

    19

    文章

    1767

    浏览量

    68076
  • 英伟达
    +关注

    关注

    22

    文章

    3334

    浏览量

    87824
  • 深度学习
    +关注

    关注

    73

    文章

    5240

    浏览量

    119936

原文标题:英伟达又现神操作,程序员也能成画家!

文章出处:【微信号:TheBigData1024,微信公众号:人工智能与大数据技术】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    深度学习生成对抗网络(GAN)全解析

    GANs真正的能力来源于它们遵循的对抗训练模式。生成器的权重是基于判别器的损失所学习到的。因此,生成器被它生成图像所推动着进行训练,很难知
    发表于 03-29 14:42 98次阅读
    深度学习<b class='flag-5'>生成对抗</b><b class='flag-5'>网络</b>(GAN)全解析

    生成式人工智能和感知式人工智能的区别

    生成新的内容和信息的人工智能系统。这些系统能够利用已有的数据和知识来生成全新的内容,如图片、音乐、文本等。生成式人工智能通常基于深度学习技术,如生成
    的头像 发表于 02-19 16:43 578次阅读

    Stability AI试图通过新的图像生成人工智能模型保持领先地位

    Stability AI的最新图像生成模型Stable Cascade承诺比其业界领先的前身Stable Diffusion更快、更强大,而Stable Diffusion是许多其他文本到图像
    的头像 发表于 02-19 16:03 433次阅读
    Stability AI试图通过新的<b class='flag-5'>图像</b><b class='flag-5'>生成</b>人工智能模型保持领先地位

    谷歌推出图像生成工具ImageFX,提升图像质量

    作为实验室的新兴工具,ImageFX 允许用户借助简洁的文字指令来创作图像。经过前期试验,该团队认为对生成型人工智能工具来说最关键的是如何启发并鼓励用户挖掘和实践创意想法。
    的头像 发表于 02-02 14:18 266次阅读

    labview生成专业的测试报表工具

    Labview软件免费的报表生成工具
    发表于 12-21 09:57 3次下载

    用MCUXpresso调试其它工具生成的项目

    用MCUXpresso调试其它工具生成的项目
    的头像 发表于 10-31 16:42 259次阅读
    用MCUXpresso调试其它<b class='flag-5'>工具</b>链<b class='flag-5'>生成</b>的项目

    图像分类的主流深度神经网络模型有哪些 深度神经网络搜索方法总结

    生成对抗网络(Generative adversarial net,GAN)是另一种常见的基于深度学习技术的生成模型,包括生成器和判别器2个组件,如图11。二者相互
    发表于 10-12 10:24 1087次阅读
    <b class='flag-5'>图像</b>分类的主流深度神经<b class='flag-5'>网络</b>模型有哪些 深度神经<b class='flag-5'>网络</b>搜索方法总结

    生成式 AI 研究通过引导式图像结构控制为创作者赋能

    内容创作者只需一张提示图片和几个描述性词语,就能图像转化为视觉内容。 可靠轻松编辑并生成内容的能力有助于艺术家、设计师和创作者不断扩展创意的可能性。这也将为那些依赖动画、视觉设计和
    的头像 发表于 07-24 19:30 368次阅读

    基于扩散模型的图像生成过程

    近年来,扩散模型在文本到图像生成方面取得了巨大的成功,实现了更高图像生成质量,提高了推理性能,也可以激发扩展创作灵感。 不过仅凭文本来控制图像
    的头像 发表于 07-17 11:00 2119次阅读
    基于扩散模型的<b class='flag-5'>图像</b><b class='flag-5'>生成</b>过程

    从评论中生成艺术的开源项目

    电子发烧友网站提供《从评论中生成艺术的开源项目.zip》资料免费下载
    发表于 07-05 11:06 0次下载
    从评论中<b class='flag-5'>生成</b>艺术的<b class='flag-5'>开源</b>项目

    虹软图像深度恢复技术与生成式AI的创新 生成式AI助力

    当前,生成式人工智能(AI)技术的快速发展令人瞩目。它能够理解人类的描述,并在短时间内生成逼真的图像和视频。在生成式AI的应用中,图像深度信
    发表于 06-21 09:06 310次阅读

    PyTorch教程-20.2. 深度卷积生成对抗网络

    20.2. 深度卷积生成对抗网络¶ Colab [火炬]在 Colab 中打开笔记本 Colab [mxnet] Open the notebook in Colab Colab
    的头像 发表于 06-05 15:44 458次阅读
    PyTorch教程-20.2. 深度卷积<b class='flag-5'>生成对抗</b><b class='flag-5'>网络</b>

    PyTorch教程20.2之深度卷积生成对抗网络

    电子发烧友网站提供《PyTorch教程20.2之深度卷积生成对抗网络.pdf》资料免费下载
    发表于 06-05 10:21 2次下载
    PyTorch教程20.2之深度卷积<b class='flag-5'>生成对抗</b><b class='flag-5'>网络</b>

    COMPUTEX2023 | NVIDIA ACE 游戏开发版利用生成式 AI 使虚拟角色栩栩如生

    全新代工服务为云端及 PC 的游戏角色产生出定制化生成式 AI 模型 COMPUTEX — 2023 年 5 月 29 日 — NVIDIA 宣布推出全新定制 AI 模型代工服务 NVIDIA
    的头像 发表于 05-30 01:45 400次阅读

    什么是生成式AI?生成式AI的四大优势

    生成式AI是一种特定类型的AI,专注于生成新内容,如文本、图像和音乐。这些系统在大型数据集上进行训练,并使用机器学习算法生成与训练数据相似的新内容。这在各种应用程序中都很有用,比如创建
    发表于 05-29 14:12 2773次阅读