0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

使用模块化、OpenUSD的Omniverse加速3D工作流程

丽台科技 来源:丽台科技 2023-08-28 11:35 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

最新的NVIDIA Omniverse版本可基于 Omniverse Kit 105 套件提供一系列令人振奋的新功能,使开发者能够更加轻松地开始构建 3D 模拟工具和工作流。

基于通用场景描述(即 OpenUSD)、NVIDIA RTXAI 技术打造的 Omniverse 使用户能够创建出先进实时 3D 模拟应用,用于工业数字化和 AI 感知场景。这个完全可组合的平台可从工作站扩展到云,因此只需少量编码工作就能构建先进、可扩展的解决方案。

在 SIGGRAPH 2023 上的 NVIDIA 主题演讲中,NVIDIA 首席执行官黄仁勋发布了 ChatUSD 和 RunUSD。

ChatUSD 是一个大型语言模型(LLM)媒介,可使用文本生成 Python-USD 代码脚本和回答 USD 知识问题,有助于直接在 Omniverse 中简化并加速 USD 开发任务。

RunUSD 是一个 Cloud API,可通过检查上传文件与 OpenUSD 版本的兼容性,将 OpenUSD 文件转换为完全路径跟踪渲染的图像,并使用 Omniverse Cloud 生成渲染。NVIDIA OpenUSD 开发者计划中的开发人员目前可以使用该 API 的演示。

这些 OpenUSD 投入是在 NVIDIA 与皮克斯、Adobe、苹果、Autodesk 共同成立 OpenUSD 联盟(AOUSD)的基础上进一步扩大的。

使用 Omniverse Kit 构建

基于 OpenUSD 的应用

Omniverse Kit 是开发工具套件和引擎,用于在 Omniverse 上构建基于 OpenUSD 的应用和扩展程序。这套功能强大、可扩展的 SDK 是使用 Omniverse 构建各个应用、连接器和扩展程序的基础。

Convai 最近使用 Omniverse Kit 开发了一个扩展程序,使创作者可以在数字孪生环境中添加角色,这些角色可以提供环境和物体的相关信息,也可以充当导游或虚拟机器人。Cesium for Omniverse 是使用 Kit 构建的一个支持 3D Tiles 的扩展程序,后者是一项在虚拟世界(包括 OpenUSD 支持的虚拟世界)中传输海量地理空间数据集的开放标准。

echo3D 是一个可帮助开发者和企业构建并部署 3D 应用的 3D 资产管理云平台。它使用 Kit 开发了一个扩展程序,可将 3D 资产远程添加到 Omniverse 项目中,并通过云进行更新。

Alpha3D 是一个由生成式 AI 支持的平台,可在几分钟内将 2D 图像和文本提示转化成 3D 模型。借助使用 Omniverse Kit 开发的 Alpha3D 扩展程序,3D 模型在渲染完成后可自动导入创作者的 Omniverse 面板。

更高的效率,更好的用户体验

通过注册进入全新 Kit Extension,用户便可开始在 Omniverse 上进行构建。Kit Extension 是一个用于访问、共享和管理扩展程序的中央存储库。开发者可以在这里浏览 600多个核心扩展程序,而且只需下载一次,就可以在任何地方使用。扩展程序能够以多种方式组合成工作流和体验,带来新的可能性。

a5090cfc-4545-11ee-a2ef-92fbcf53809c.png

▲ 图 1 注册 Omniverse Kit Extension

Kit 105 加入了一个全新的“欢迎窗口”,大大提升了应用的启动体验。用户可以从能够自定义的欢迎窗口快速访问最近的文件、示例和学习资源,并通过定制化扩展加载功能快速启动项目。

在 Omniverse Kit 105 中启动想要的体验后,能看到用户界面渲染有了显著的改善。新的渲染优化功能充分利用 NVIDIA RTX GPUNVIDIA Ada Lovelace架构的增强功能,并将 DLSS 3.0 技术完全集成到 Omniverse RTX Renderer 中。此外,全新的 AI 降噪器还实现了对大规模工业场景的实时 4K 路径追踪。

渲染优化在框架层面实现,无需对现有代码进行任何修改即可自动提升性能。随着 widget 光栅模式的引入,渲染成本最多可降低 20 倍。

更加强大的模块性与性能

使用 Omniverse Kit 的开发者一直对其极强的模块性(以 Kernel 为基础,通过扩展程序添加特定的功能,并将应用、服务和扩展程序组合成完整的解决方案)赞不绝口。借助 Kit 105,这种模块性也扩展到了消费领域。

现在,用户可通过 Omniverse Launcher 使用 Kit Kernel,以轻松访问 Kit 可执行程序、Python 和其他重要的核心构件。

目前通过注册 Omniverse Extension 即可获得 Kit 扩展程序,用户可根据需求将这些模块下载到一个共享位置,从而大幅缩小软件包。当多个应用使用同一版本的扩展程序时,无论是在开发过程中还是对于最终用户而言,只需下载一次即可。这样,NVIDIA 和开发者社区就可以在无需新应用版本的情况下,经常更新扩展程序,提供无缝衔接的体验。

利用新的空间框架构建沉浸式工作流

Kit 应用的开发者现在可以使用新的 Omniverse 空间框架,轻松地将扩展现实(XR)集成到 3D 工作流中。通过该框架,可以轻松地将传送、操作、导航等 XR 功能集成到现有流程中。

该空间框架的主要功能包括:

用于添加沉浸式体验和基本 XR 功能的新工具:简化并提高了设计评审和工厂规划流程的效率。

将 RTX 光线追踪和 Omniverse 连接到 SteamVR、OpenXR 和 NVIDIA CloudXR。

支持空间计算平台和头显:为基于 OpenUSD 的空间计算平台构建内容、体验和应用。

如要进一步了解该空间框架以及支持的平台和头显,参见由 RTX 赋能的空间框架通过 USD 实现全光线追踪 XR 流程。

体验 Omniverse Kit

用户可在更新后的 Omniverse 基础应用中体验 Omniverse Kit 105 的所有新功能和性能改进。这些应用是完全可自定义的参考应用,可以进行复制、扩展或增强。

Omniverse USD Composer使 3D 用户能够组装基于 OpenUSD 的大型场景。专门开发优质 360° HDRi 环境的 CGI.Backgrounds 在 USD Composer 中提供了多个超高清 HDRi 贴图。

Omniverse Audio2Face提供对只需通过音频文件即可创建逼真面部动画和手势的生成式 AI 应用编程接口(API)的访问。现在还添加了多语种支持和全新女性基础模型。

这些应用可作为模板用于构建用户自己的 Kit 应用。用户可通过解构和添加示例应用中的功能,来构建自定义应用。






审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 编码器
    +关注

    关注

    45

    文章

    4011

    浏览量

    143373
  • 存储器
    +关注

    关注

    39

    文章

    7757

    浏览量

    172210
  • 连接器
    +关注

    关注

    105

    文章

    16384

    浏览量

    147900
  • python
    +关注

    关注

    58

    文章

    4885

    浏览量

    90314
  • LLM
    LLM
    +关注

    关注

    1

    文章

    350

    浏览量

    1394

原文标题:使用模块化、OpenUSD 加持的 Omniverse 版本加速 3D 工作流程

文章出处:【微信号:Leadtek,微信公众号:丽台科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    工作流节点说明---工作流节点

    平台提供工作流节点,实现工作流嵌套工作流的效果。 节点说明 在一个工作流中,开发者可以将另一个工作流作为其中的一个步骤或节点,实现复杂任务
    发表于 03-24 21:05

    开发工作流创建工作流

    择要使用的节点。 2、将节点按任务流程相连接。 3、配置节点的输入和输出参数 测试并发布工作流 开发者如需在智能体内使用该工作流,必须先完成工作流
    发表于 03-10 10:05

    NVIDIA全新开放物理AI模型和框架加速人形机器人开发

    本文是洞悉 Omniverse 系列文章。“洞悉 Omniverse”重点介绍开发者、3D 从业者与企业如何使用 OpenUSD 和 NVIDIA
    的头像 发表于 02-06 15:36 792次阅读

    使用OpenUSD与NVIDIA Halos构建安全物理AI系统

    全新 NVIDIA 安全框架与技术正在推进开发者构建安全物理 AI 的方式。 本文是洞悉 Omniverse 系列文章。“洞悉 Omniverse”重点介绍开发者、3D 从业者与企业
    的头像 发表于 12-24 10:22 971次阅读

    强强合作 西门子与日月光合作开发 VIPack 先进封装平台工作流程

    平台开发基于 3Dblox 的工作流程。双方目前已经合作完成三项 VIPack 技术的 3Dblox 工作流程验证,包括扇出型基板上芯片封装(FOCoS)、扇出型基板上芯片桥接
    的头像 发表于 10-23 16:09 4648次阅读
    强强合作 西门子与日月光合作开发 VIPack 先进封装平台<b class='flag-5'>工作流程</b>

    电芯自动面垫分选装盒生产线的工作流程解析

    电芯自动面垫分选装盒生产线的工作流程解析|深圳比斯特自动
    的头像 发表于 09-28 10:29 585次阅读

    使用OpenUSD实现可互操作3D工作流(下)

    通用场景描述简称 OpenUSD,是一个开放且可扩展的生态系统,用于在 3D 世界内描述内容、合成数据、进行仿真和开展协作。
    的头像 发表于 09-23 15:39 1115次阅读

    使用OpenUSD实现可互操作3D工作流(上)

    通用场景描述简称 OpenUSD,是一个开放且可扩展的生态系统,用于在 3D 世界内描述内容、合成数据、进行仿真和开展协作。
    的头像 发表于 09-23 15:37 1071次阅读

    使用NVIDIA AI Blueprint打造3D世界

    在传统工作流中,建模师必须构建占位模型、低精度资产来填充 3D 场景,优化核心资产以完成场景。之后,可以优化、细化并最终完成视觉效果。
    的头像 发表于 09-23 14:35 1134次阅读

    iTOF技术,多样3D视觉应用

    视觉传感器对于机器信息获取至关重要,正在从二维(2D)发展到三维(3D),在某些方面模仿并超越人类的视觉能力,从而推动创新应用。3D 视觉解决方案大致分为立体视觉、结构光和飞行时间 (TOF) 技术
    发表于 09-05 07:24

    NVIDIA Omniverse Extension开发秘籍

    NVIDIA Omniverse 是一个模块化平台,使用高级 API 和微服务来构建由 OpenUSD 和 NVIDIA RTX 提供支持的 3D 应用。
    的头像 发表于 08-22 15:52 3860次阅读
    NVIDIA <b class='flag-5'>Omniverse</b> Extension开发秘籍

    使用NVIDIA Cosmos模型提高未来智能汽车安全性

    本文是洞悉 Omniverse 系列文章。“洞悉 Omniverse” 重点介绍开发者、3D 从业者与企业如何使用 OpenUSD 和 NVIDIA
    的头像 发表于 07-14 11:46 1323次阅读

    基于NVIDIA AI的3D机器人感知与地图构建系统设计

    机器人必须感知和理解其 3D 环境,才能安全高效地行动。这一点在非结构或陌生空间中的自主导航、对象操作和远程操作等任务尤为重要。当前机器人感知技术的进展,越来越多地体现在通过统一的实时工作流与强大的感知
    的头像 发表于 07-04 14:31 1358次阅读
    基于NVIDIA AI的<b class='flag-5'>3D</b>机器人感知与地图构建系统设计

    洞悉Omniverse:如何实现工业设施数字孪生中的机器人机群仿真

    “洞悉 Omniverse”系列文章 将重点介绍艺术家、开发者和企业如何使用通用场景描述和 NVIDIA Omniverse 的最新技术改变其工作流程OpenUSD 和 Mega
    的头像 发表于 05-11 16:46 1616次阅读
    洞悉<b class='flag-5'>Omniverse</b>:如何实现工业设施数字孪生中的机器人机群仿真

    光庭信息Kustom3D引擎登陆2025上海车展

    化、场景、娱乐交互愿景。光庭信息Kustom3D引擎应势而生,直击行业痛点,这套革新性空间交互系统,解耦工作流程,释放场景构建效率,让创意自由生长,引领深度探索智能座舱的下一站。
    的头像 发表于 04-30 16:04 1038次阅读