0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何使用NVIDIA Edify创建出细节考究的 3D 沙漠景观

NVIDIA英伟达 来源:NVIDIA英伟达 2024-08-02 16:00 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

NVIDIA 研究人员在当地时间本周二 SIGGRAPH 的 Real-Time Live 活动中,现场演示了如何使用NVIDIA Edify(一种适用于视觉生成式 AI 的多模态架构)在几分钟内即可创建出一个细节考究的 3D 沙漠景观。

作为本届 SIGGRAPH 图形大会备受瞩目的会议之一,NVIDIA 研究人员展示了他们在 AI 智能体的支持下,仅用五分钟不到的时间,就能够从头开始创建和编辑出沙漠景观。现场 demo 充分展现了生成式 AI 如何通过加快构思速度和生成原本需要从资源库中获取的自定义辅助资产,以成为艺术家的得力助手。

通过大幅缩短构思时间,这些 AI 技术将提高 3D 艺术家的生产力和创造力,为他们提供更快探索概念和加快部分工作流所需的工具。例如,他们可以在几分钟内生成场景所需的背景资产或 360 HDRi 环境,再也不需要在寻找或创建它们这件事上花费数小时了。

创意变成 3D 场景只需三分钟

创建一个完整的 3D 场景是一项复杂且耗时的任务。为了创建出一个丰富的场景,艺术家必须使用大量背景物体衬托他们的主要素材,然后还要找到合适的背景和环境贴图来模拟光照效果。由于时间有限,他们往往不得不在快速产出结果和探索各种创意之间做出权衡。

在 AI 智能体的支持下,创意团队就能“两者兼得”——既能快速将概念转化为现实,又能通过不断迭代获得合适的外观。

在这场 Real-Time Live 活动的 demo 演示中,研究人员使用文本提示指导 NVIDIA Edify 驱动的模型,来生成数十种 3D 资源,包括仙人掌、岩石、公牛头骨等,而且只需要几秒钟就能生成预览。

接下来,他们还指示智能体利用其他模型创建可能需要使用的背景和物体如何放置在场景中的布局,并且通过快速将岩石转换成金块展示了智能体如何适应创意指示最后一刻的变化。

在有了设计方案之后,他们利用智能体创建全质量资源,并在NVIDIA Omniverse USD Composer(一个用于创建虚拟世界的应用程序)中将场景渲染成逼真的图像。

NVIDIA Edify 加速环境生成

NVIDIA Edify 模型可以在帮助创作者专注于主要素材的同时,使用 AI 驱动的场景生成工具加速背景环境和物体的创建。该 Real-Time Live 活动的 demo 演示了两个 Edify 模型:

Edify 3D可根据文本或图像提示生成可直接编辑的 3D 网格。该模型只需要几秒钟就能生成预览,包括各个物体的旋转动画。这将帮助创作者在确定具体设计之前快速创建出原型。

Edify 360 HDRi可根据文本或图像提示生成最高分辨率为16K 的自然景观高动态范围图像(HDRi),这些图像可以用作背景和为场景模拟光照效果。

在 demo 过程中,研究人员还展示了一个由大语言模型驱动的 AI 智能体,以及一个使用 3D 工作流平台 OpenUSD 生成场景布局的 AI 模型 USD Layout。

NVIDIA 还在 SIGGRAPH 上宣布,两家领先的创意内容公司正在为设计师和艺术家提供一种通过生成式 AI 大幅提升生产力的新方法——使用 NVIDIA Edify 驱动的工具。

Shutterstock 推出了其 3D 生成服务的商业测试版。通过该服务,创作者可根据文本或图像提示快速创建原型并生成 3D 资产。该公司基于 Edify 的 360 HDRi 生成器也已进入早期体验阶段。

Getty Images 使用最新版本的 NVIDIA Edify 更新了其 Generative AI by Getty Images 服务,不但使用户创建图像的速度加快了一倍,而且还提高了输出质量和提示依从性,并支持高级控制和微调。

充分利用通用场景描述

使用 Edify 模型生成的 3D 物体、环境贴图和布局均采用 USD 这一用于描述和组成 3D 世界的标准格式。凭借这一兼容性,艺术家能够直接将 Edify 驱动的创作导入 Omniverse USD Composer。

在 Composer 中,他们可以使用流行的数字内容创建工具进一步修改场景,例如改变物体的位置、修改物体的外观、调整光照效果模拟等。

审核编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 3D
    3D
    +关注

    关注

    9

    文章

    2990

    浏览量

    113831
  • NVIDIA
    +关注

    关注

    14

    文章

    5496

    浏览量

    109092
  • AI
    AI
    +关注

    关注

    89

    文章

    38099

    浏览量

    296622
  • 模型
    +关注

    关注

    1

    文章

    3648

    浏览量

    51713

原文标题:SIGGRAPH 2024 | NVIDIA 研究人员利用实时生成式 AI 创建身临其境的沙漠世界

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    使用NVIDIA AI Blueprint打造3D世界

    在传统工作流中,建模师必须构建占位模型、低精度资产来填充 3D 场景,优化核心资产以完成场景。之后,可以优化、细化并最终完成视觉效果。
    的头像 发表于 09-23 14:35 757次阅读

    AD 3D封装库资料

     AD  PCB 3D封装
    发表于 08-27 16:24 2次下载

    TechWiz LCD 3D应用:FFS仿真

    建模任务 堆栈结构 建模过程 2.1使用TechWiz Layout绘制各层掩模版平面图 2.2创建堆栈结构,并生成3D结构 2.3 使用TechWiz LCD 3D进行各项参数计算 3
    的头像 发表于 07-14 14:08 447次阅读
    TechWiz LCD <b class='flag-5'>3D</b>应用:FFS仿真

    TechWiz LCD 3D应用:局部液晶配向

    ,本案例使用TechWiz LCD 3D进行局部摩擦的设置。 1. 建模任务 1.1进行局部摩擦配置 2. 建模过程 以下是建模过程中部分重要步骤的说明 2.1在TechWiz Layout中创建结构
    发表于 06-16 08:46

    3D AD库文件

    3D库文件
    发表于 05-28 13:57 6次下载

    答疑|3D打印能打印立体字母吗?

    议: (1)在使用3D建模软件创建字母模型时,要确保字母的线宽至少有1-2MM,避免打印时断裂。 (2)如果字母有悬空部分(比如把字母竖起来打印时,“H”中间的横线),打印时需添加支撑结构,但大多时候都是
    发表于 05-21 16:17

    TechWiz LCD 3D应用:挠曲电效用仿真

    完成后在TechWiz LCD 3D中加载并进行相关参数设置 2.2在TechWiz LCD 3D软件中开启应用挠曲电效应的功能 2.3其它设置 液晶设置 电压条件设置 光学分析部分,添加偏振片 结果查看 3.1 V-T曲线 3.2 结果对比
    发表于 05-14 08:55

    NVIDIA助力影眸科技3D生成工具Rodin升级

    。在 NVIDIA Omniverse 平台、OpenUSD 以及 Isaac Lab 解决方案的助力下,影眸科技实现了 Rodin 平台的升级,显著提升了 3D 资产生成的速度、质量与用户体验,推动具身智能进一步发展。
    的头像 发表于 04-27 15:09 1012次阅读

    3D闪存的制造工艺与挑战

    3D闪存有着更大容量、更低成本和更高性能的优势,本文介绍了3D闪存的制造工艺与挑战。
    的头像 发表于 04-08 14:38 1824次阅读
    <b class='flag-5'>3D</b>闪存的制造工艺与挑战

    3D 全息投影智慧灯杆:智慧城市的梦幻之光

    与智慧灯杆相结合,不仅为城市照明带来了新的活力,还为信息传播、城市景观等领域开辟了全新的应用场景。 技术原理:光与影的奇幻交织 3D 全息投影智慧灯杆的核心在于其 3D 全息投影技术。该技术基于干涉和衍射原理,通过记录物体反射或
    的头像 发表于 03-17 15:42 717次阅读

    TechWiz LCD 3D应用:局部液晶配向

    ,本案例使用TechWiz LCD 3D进行局部摩擦的设置。 1. 建模任务 1.1进行局部摩擦配置 2. 建模过程 以下是建模过程中部分重要步骤的说明 2.1在TechWiz Layout中创建结构
    发表于 02-08 08:52

    SciChart 3D for WPF图表库

    SciChart 3D for WPF 是一个实时、高性能的 WPF 3D 图表库,专为金融、医疗和科学应用程序而设计。非常适合需要极致性能和丰富的交互式 3D 图表的项目。 使用我们
    的头像 发表于 01-23 13:49 1251次阅读
    SciChart <b class='flag-5'>3D</b> for WPF图表库

    腾讯混元3D AI创作引擎正式上线

    近日,腾讯公司宣布其自主研发的混元3D AI创作引擎已正式上线。这一创新性的创作工具,标志着腾讯在3D内容生成领域迈出了重要一步。 混元3D AI创作引擎的核心功能极为强大,用户只需通过简单的提示词
    的头像 发表于 01-22 10:26 956次阅读

    TechWiz LCD 3D应用:局部液晶配向

    ,本案例使用TechWiz LCD 3D进行局部摩擦的设置。 1. 建模任务 1.1进行局部摩擦配置 2. 建模过程 以下是建模过程中部分重要步骤的说明 2.1在TechWiz Layout中创建结构
    发表于 01-03 08:58

    TechWiz LCD 3D应用:挠曲电效用仿真

    完成后在TechWiz LCD 3D中加载并进行相关参数设置 2.2在TechWiz LCD 3D软件中开启应用挠曲电效应的功能 2.3其它设置 液晶设置 电压条件设置 光学分析部分,添加偏振片 结果查看 3.1 V-T曲线 3.2 结果对比
    发表于 12-10 13:43