0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

SIGGRAPH 2023 | NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级

NVIDIA英伟达 来源:未知 2023-08-09 19:10 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

最新平台更新、Adobe Firefly 的接入、OpenUSD 向 RealityKit 的导入以及 Ada 架构系统将共同加速各种具有互操作性的 3D 工作流以及工业数字化进程。

洛杉矶 — SIGGRAPH — 太平洋时间 2023 年 8 月 8 日 —NVIDIA 发布 NVIDIA Omniverse 平台的重要版本更新,为开发者和工业企业提供全新的基础应用和服务,助力其使用 OpenUSD 框架和生成式 AI 来优化并强化其 3D 工作流程。

Omniverse 是一个 OpenUSD 原生软件平台,可进行跨 3D 工具和应用的连接、描述及模拟。此次更新将加快虚拟世界和高级工作流的创建速度,推动工业数字化进程。Cesium、Convai、Move AI、SideFX Houdini 和 Wonder Dynamics 现已通过 OpenUSD 接入 Omniverse。

此次平台更新主要升级了 Omniverse Kit(用于开发原生 OpenUSD 应用和扩展程序的引擎),以及 NVIDIA Omniverse Audio2Face 基础应用和空间计算功能。

NVIDIA Omniverse 与模拟技术副总裁 Rev Lebaredian 表示:“工业企业正在竞相推动工作流的数字化,这提升了对 OpenUSD 赋能、互联、可互操作的 3D 软件生态的需求。最新的 Omniverse 更新让开发者能够通过 OpenUSD,利用生成式 AI 来强化自身工具,并让企业能够构建更大、更复杂的世界级模拟,以此作为其工业应用的数字测试场。”

重要改进

Omniverse Kit 的更新包括:

  • 全新模块化应用构建:全新 Omniverse Kit Extension Registry 是一个用于访问、共享和管理 Omniverse 扩展程序的中央存储库,开发者可以轻松启用或关闭其应用中的功能,因此能够比以往更加轻松地利用 NVIDIA 提供的 600 多个核心 Omniverse 扩展程序来构建自定义应用。

  • 全新开发者模板和资源:全新应用和体验模板让刚开始使用 OpenUSD 和 Omniverse 的开发者只需要进行极少量的编码工作就能轻松上手。

  • 提升效率和用户体验:全新渲染优化功能充分利用 NVIDIA RTX GPU 中 NVIDIA Ada Lovelace 架构的各项改进,并将 DLSS 3 技术完全集成到 Omniverse RTX 渲染器中。全新 AI 降噪器可实现大型工业场景的实时 4K 路径追踪。

  • 由原生 RTX 驱动的空间集成:全新扩展现实(XR)开发者工具可让用户在基于 Omniverse 的应用中构建原生空间计算选项,使用户能够按照自己的想法灵活地体验 3D 项目和虚拟世界。

这些平台更新在 Omniverse 基础应用中得到了展现。Omniverse 基础应用是完全可定制的参考应用,创作者、企业和开发者可以对其进行复制、扩展或改进。升级的应用包括:

  • Omniverse USD Composer:让 3D 用户能够组装基于 OpenUSD 的大型场景。

  • Omniverse Audio2Face:提供对只需通过音频文件即可创建逼真面部动画和手势的生成式 AI 应用编程接口的访问。现在还添加了多语种支持和全新女性基础模型。

OpenUSD 扩展 Omniverse 生态

NVIDIA 还发布了一系列面向开发者和企业的框架、资源和服务,以此加速通用场景描述(即OpenUSD)的采用。

此外,NVIDIA 还宣布构建了全新的 Omniverse Cloud API,供开发人员更无缝地实现和部署 OpenUSD 工作流和应用程序。例如,ChatUSD 是一个供开发人员使用的大型语言模型(LLM) copilot 工具,可以回答 USD 知识问题或生成 Python-USD 代码脚本。

OpenUSD 支持的全新 Omniverse 连接器现已推出,为工业企业打破复杂生产流水线中的数据孤岛带来了更多的可能性。

Adobe 与 NVIDIA 宣布计划将 Adobe Firefly(Adobe 的创意生成式 AI 模型系列)作为 Omniverse 的 API 提供给开发者和创作者,助力其完善设计流程。此举扩大了双方在 Adobe Substance 3D、生成式 AI 和 OpenUSD 项目方面的合作。

Wonder Dynamics 已接入 Omniverse,通过其 AI 平台 Wonder Studio 提供全新 OpenUSD 导出支持。Wonder Studio AI 平台可自动对计算机生成的角色进行动画化、添加照明并合成到实时动作场景中。全新 OpenUSD 导出支持将使艺术家只需要使用单个摄像机拍摄的视频,就能生成并导出完整的 3D 场景。

Luma AI 以 USDZ 格式制作的现实捕捉模型可以随时导入到 Omniverse 中。虚拟形象公司 Convai 和角色引擎公司 Inworld AI 的工具也接入了 Omniverse。借助 Convai 等 AI 工具,创作者可以在数字孪生环境中添加角色,这些角色可以提供环境和物体的相关信息,也可以充当导游或虚拟机器人。Move AI 通过 Move One 应用实现了单摄像头动作捕捉,捕捉的图像可用于生成 3D 角色动画,然后将其导出到 OpenUSD 并在 Omniverse 中使用。

Omniverse 用户现在可以构建与其他基于 OpenUSD 的空间计算平台(如 ARKit 和 RealityKit)兼容的内容、体验和应用。此外,对 Khronos Group OpenXR 开放标准的全新支持将 Omniverse 的应用范围扩展到了 HTC VIVE、Magic Leap 和 Varjo 等制造商生产的更多头显。

SideFX Houdini 的用户现在还可以将 Houdini Digital Assets 直接加载到 Omniverse 视窗中,使基于 Houdini 的互联工作流衔接得更加无缝。Cesium 的 Omniverse 扩展程序 Cesium for Omniverse 支持 3D Tiles。3D Tiles 是一种在虚拟世界(包括 OpenUSD 支持的虚拟世界)中传输大规模地理空间数据集的开放标准。CGI.Backgrounds 现在可在 USD Composer 中使用多种超高清 HDRi 贴图。Cadence DataCenter Design Software 现可在 Omniverse 上使用,其可帮助用户在完整的数字孪生情境中查看计算流体动力学模拟。借助 Cadence 数据中心扩展程序,用户可以在实施前规划、测试并验证设计和运营方面的考虑因素。Blackshark.AI 世界数字孪生平台现已接入 Omniverse。

客户使用 Omniverse 实现数字化

多家客户正在使用 Omniverse 来完成从模拟机器人到训练 AI 模型和改进动画等各种任务。

波士顿动力人工智能研究所(Boston Dynamics AI Institute)正在使用 Omniverse 模拟机器人及其交互,以推动新型机器人和控制系统的设计工作。汽车和自主系统产业化领域的领先企业大陆集团正在其移动机器人业务中使用 Omniverse,以大规模地生成符合物理学的合成数据,用以训练计算机视觉 AI 模型和执行系统集成测试。

沃尔沃汽车已将其数字孪生转为 OpenUSD 格式,使用 Omniverse 创造出沉浸式可视化效果,帮助客户在线做出购买决策。

品牌设计及体验机构 Marks Design 正在使用 Omniverse 和 OpenUSD 来简化并提高协作的效率,同时改进其动画、可视化和渲染工作流。

全新 Omniverse 系统与合作伙伴

NVIDIA 正在与全球各地的系统制造商协作,致力于为数百万设计师、建筑师和工程师提供针对 Omniverse 优化配置的 RTX 工作站。这些新系统最多可搭载四颗 NVIDIA RTX 6000 Ada Generation GPU 并搭配 NVIDIA Omniverse Enterprise 软件,可加速 OpenUSD 世界的构建、生成式 AI 赋能的协同设计以及其他工业数字化应用。

Omniverse 用户还可以充分利用全新 NVIDIA L40S GPU 的性能。这款功能强大的通用数据中心 GPU 可加速图形密集型工作负载。

供应情况

最新 Omniverse 版本现已发布可免费下载的公测版,将于近期通过 Omniverse Enterprise 提供。

点击“阅读原文”,或扫描下方海报二维码,观看 NVIDIA 创始人兼 CEO 黄仁勋在 SIGGRAPH 现场发表的 NVIDIA 主题演讲回放了解 NVIDIA 的新技术,包括屡获殊荣的研究,OpenUSD 开发,以及最新的 AI 内容创作解决方案。


原文标题:SIGGRAPH 2023 | NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    23

    文章

    4115

    浏览量

    99631

原文标题:SIGGRAPH 2023 | NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    NVIDIA DLI推出全新OpenUSD教学套件

    GTC 期间,NVIDIA 深度学习培训中心(DLI)推出了面向教育工作者的全新 OpenUSD 教学套件,持续为高校提供体系化 AI 教学资源。
    的头像 发表于 04-16 11:42 409次阅读

    NVIDIA发布Vera Rubin DSX AI Factory参考设计

    NVIDIA 今日宣布推出 NVIDIA Vera Rubin DSX AI Factory 参考设计,这是一份用于构建协同设计的 AI 基础设施的指南。同时正式
    的头像 发表于 03-18 14:42 641次阅读

    NVIDIA全新开放物理AI模型和框架加速人形机器人开发

    本文是洞悉 Omniverse 系列文章。“洞悉 Omniverse”重点介绍开发者、3D 从业者与企业如何使用 OpenUSDNVIDIA
    的头像 发表于 02-06 15:36 790次阅读

    使用OpenUSDNVIDIA Halos构建安全物理AI系统

    如何使用 OpenUSDNVIDIA Omniverse 的最新进展深入改变他们的工作流。 物理 AI 正从研究实验室走向现实世界,为智能机器人和智能汽车 (如无人驾驶出租车)
    的头像 发表于 12-24 10:22 965次阅读

    NVIDIA Omniverse基于Container的部署推流方案

    为了让客户能够高效安装和部署 NVIDIA OmniverseNVIDIA Isaac 平台,NVIDIA 现已推出简单便捷的容器化部署方案,以
    的头像 发表于 12-17 10:17 951次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b>基于Container的部署推流方案

    利用NVIDIA Cosmos开放世界基础模型加速物理AI开发

    NVIDIA 最近发布NVIDIA Cosmos 开放世界基础模型(WFM)的更新,旨在加速物理 AI 模型的测试与验证数据生成。借助
    的头像 发表于 12-01 09:25 1437次阅读

    NVIDIA推出Omniverse DSX Blueprint

    在华盛顿特区 NVIDIA GTC 大会的主题演讲中,NVIDIA 创始人兼首席执行官黄仁勋介绍了 NVIDIA Omniverse DSX,这是一个全面、开放的蓝图,用于设计和运营吉
    的头像 发表于 11-03 15:08 1090次阅读

    使用OpenUSD和SimReady资产构建AI工厂

    适用于 AI 工厂数字孪生的 NVIDIA Omniverse Blueprint 已发布,现已支持 O
    的头像 发表于 09-06 15:23 1660次阅读
    使用<b class='flag-5'>OpenUSD</b>和SimReady资产构建<b class='flag-5'>AI</b>工厂

    NVIDIA Omniverse Extension开发秘籍

    NVIDIA Omniverse 是一个模块化平台,使用高级 API 和微服务来构建由 OpenUSDNVIDIA RTX 提供支持
    的头像 发表于 08-22 15:52 3860次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Omniverse</b> Extension开发秘籍

    全球知名品牌借助NVIDIA技术规模化交付个性化广告

    营销领先者正借助使用 OpenUSDNVIDIA Omniverse 和代理式 AI 技术开发的解决方案,加速内容创作管线。
    的头像 发表于 08-12 15:15 1534次阅读

    NVIDIA通过全新 Omniverse库、Cosmos物理AI模型及AI计算基础设施,为机器人领域开启新篇章

    NVIDIA DGX Cloud 让开发者能够在任何地方运行需求严苛的仿真 · 物理 AI 领先者 Amazon Devices Services 正在使用它们来支持新的制造解决方案。   Cosmos 推动机器人世界
    的头像 发表于 08-12 11:29 2002次阅读
    <b class='flag-5'>NVIDIA</b>通过全新 <b class='flag-5'>Omniverse</b>库、Cosmos物理<b class='flag-5'>AI</b>模型及<b class='flag-5'>AI</b>计算基础设施,为机器人领域开启新篇章

    使用NVIDIA Cosmos模型提高未来智能汽车安全性

    本文是洞悉 Omniverse 系列文章。“洞悉 Omniverse” 重点介绍开发者、3D 从业者与企业如何使用 OpenUSDNVIDIA
    的头像 发表于 07-14 11:46 1321次阅读

    NVIDIA扩展适用于AI工厂数字孪生的Omniverse Blueprint

    NVIDIA 宣布大幅扩展适用于 AI 工厂数字孪生的 Omniverse Blueprint,为工程团队提供更多 AI 工厂构建工具,目前已作为预览版推出。
    的头像 发表于 05-22 09:48 1254次阅读

    洞悉Omniverse:如何实现工业设施数字孪生中的机器人机群仿真

    “洞悉 Omniverse”系列文章 将重点介绍艺术家、开发者和企业如何使用通用场景描述和 NVIDIA Omniverse 的最新技术改变其工作流程。 OpenUSD 和 Mega
    的头像 发表于 05-11 16:46 1614次阅读
    洞悉<b class='flag-5'>Omniverse</b>:如何实现工业设施数字孪生中的机器人机群仿真

    NVIDIA助力影眸科技3D生成工具Rodin升级

    。在 NVIDIA Omniverse 平台、OpenUSD 以及 Isaac Lab 解决方案的助力下,影眸科技实现了 Rodin 平台的升级,显著提升了 3D 资产
    的头像 发表于 04-27 15:09 1467次阅读