CES | 使用生成式 AI 快速生成虚拟世界的 3D 资产-电子发烧友网

为了加速 3D 世界和元宇宙的发展，NVIDIA 推出了许多 AI 研究项目来帮助各行业的创作者利用生成式 AI 挖掘新的可能性。

生成式 AI 将触及元宇宙的方方面面，而且它已经被用于一些用例，例如使用 Omniverse ACE 构建栩栩如生的 AI 虚拟形象等。其中的许多项目已成为 Omniverse 社区广受欢迎的工具，包括能够根据音频生成动画的 Audio2Face 和 Audio2Gesture。

在 CES 上，NVIDIA 公布了 Omniverse 即将加入的全新生成式 AI 技术，这项技术将使虚拟世界的创建变得比以往更快、更容易。这些模型既可以作为 NVIDIA 合作伙伴的第三方连接器，也可以在 NVIDIA 研究团队发布的内部 AI 项目中作为 AI ToyBox 的扩展程序。NVIDIA Omniverse 中的所有生成式 AI 研究项目和连接器都使用合法授权和购买的数据集。

使用生成式 AI 连接器和扩展程序

加速 3D 内容创建

NVIDIA Omniverse 通过用于第三方技术的连接器和扩展程序带来最新、最棒的生成式 AI 技术。

Move.ai 能够根据身体动作生成动画。通过 Move.ai，用户可以在任何地方捕捉人体动作并直接输出到 Omniverse 中。

视频 1：NVIDIA Omniverse 中的个人拳击示例，角色由 Move.ai 的运动数据驱动。

Lumirithmic 可根据面部扫描生成头部 3D 网格。该连接器使用户能够轻松地根据面部扫描创建电影级的虚拟形象并在任何行业都能实现大规模的 3D 扫描。Lumirithmic 联合创始人兼首席执行官 Gaurav Chawla 表示：“我们十分高兴与 NVIDIA 一起通过 Omniverse 将我们的 3D 面部扫描产品带给创作者、游戏玩家和开发者，使游戏、广告技术、元宇宙等应用获得高质量的 3D 面部形象。

视频 2：Omniverse - Lumirithmic 3D 虚拟形象捕捉集成。

Elevate3D 可根据 360 度视频录像生成逼真的产品 3D 图像，利用神经辐射场创建具有超高视觉保真度的 3D 网格。Elevate3D 联合创始人 Alexandre Carlier 和 Martin Danelljan 表示：“Omniverse 使我们能够为各种工作流和行业提供我们的技术。另外，我们愿意在该平台上构建扩展程序的另一个原因是上面有优秀的文档和开发者体验。我们的这一扩展程序将解决扫描实物时的各种难题。”

探索和实验最新生成式 AI 研究

AI 工作流是 Omniverse 体验的核心。因此 NVIDIA 不断开展新的研究项目来帮助 3D 艺术家和创作者使用 AI 加速他们的工作流。这些 AI 项目中有许多变成了广泛使用的功能，例如 Machinima 中的姿势估计、根据简单的 2D 笔画生成 360 度图像的 NVIDIA Canvas 等。

在 CES 上发布的 GET3D 是一个新的生成式 AI 模型，它可以根据 2D 图像、文本和数字等数据生成具有拓扑结构、丰富几何细节和纹理的 3D 形状。这些 3D 形状或纹理网格可以是动物和人类的造型，并且即将加入汽车、椅子、摩托车和建筑物，使部分行业的创作者能够迅速扩大他们虚拟世界中的内容数量和多样性。

图 1：GET3D 让用户能够快速生成用于填充场景的 3D 动物等形状和网格。

GET3D 将在 Omniverse AI ToyBox 中与 NVIDIA 发布的现有生成式 AI 研究项目（如 GANVerse3D Image2Car 和 AI Animal Explorer）一起提供。AI ToyBox 收录了所有最新 NVIDIA AI 项目，使内容创作者能够在虚拟世界中探索新的可能性。

AI 与元宇宙：共生关系

AI 与元宇宙对彼此的扩展都至关重要。从汽车到医疗仪器再到仓库机器人，全球的各个行业都在成为软件定义行业。这些软件定义技术如果没有在真实环境中进行彻底的测试，就无法完成开发或部署。

元宇宙中的数字孪生正在提供符合物理学的虚拟环境，使开发者能够以前所未有的速度进行智能机器人等软件定义技术的仿真模拟和测试。在元宇宙中创建的合成数据正在进一步加速前沿 AI 应用的训练，使用比以前更多的数据来训练 AI。

生成式 AI 是扩展这些数字孪生与虚拟环境的关键，它们将开创 AI 和元宇宙的新时代。

Omniverse 相关资源

Omniverse 的模块化开发框架

开发者可以使用 Omniverse 的模块化开发框架构建用于 3D 世界的生成式 AI 工具。

详情请见：

https://developer.nvidia.cn/zh-cn/nvidia-omniverse-platform
Omniverse Enterprise

企业可以通过 NVIDIA Omniverse Enterprise 使用最新的生成式 AI 技术扩展数字孪生模拟。

详情请见：

https://www.nvidia.cn/omniverse/enterprise/
Omniverse 开发者资源中心

请访问 Omniverse 开发者资源中心获取更多资源，阅读 Omniverse 的最新教程并在论坛上获得支持。

详情请见：

https://developer.nvidia.com/nvidia-omniverse-developer-resource-center