0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA Instant NeRF将多组静态图像变为3D数字场景

NVIDIA英伟达企业解决方案 来源:NVIDIA英伟达企业解决方案 2024-05-07 09:15 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

了解 AI 研究项目如何在数秒内帮助艺术家等用户用 2D 图像打造 3D 体验。

想象一幅风光旖旎的画面,比如水畔的悬崖峭壁。即便只是 2D 图像,如此美景依旧令人心驰神往。如果同一画面能以 3D 效果展现,那么无需跋涉就能身临其境。

NVIDIA RTX 技术驱动的 AI 恰恰能让我们得偿所愿。创作者运用 Instant NeRF 便能在短短数秒之间将多组静态图像变为 3D 数字场景。

简单好用的辐射场

AI 模型 NeRF 全称为“神经辐射场”,可通过输入表现某个场景的 2D 图像并在其间执行插值,渲染完整的 3D 场景。NeRF 以神经网络的形式运行,后者是一种复制大脑组织形式的模型,常用于需要模式识别的任务。

NeRF 在运用空间位置和体积渲染的基础上,通过图像的相机位姿对场景的 3D 迭代进行渲染。这类模型的计算量往往很大,因此对渲染能力的要求很高,耗时也较久。

NVIDIA 近日的 AI 研究项目带来了破局之策。

Instant NeRF 使 NeRF 全面升级:通过 AI 加速的逆渲染,对光的现实表现形式进行估计,帮助研究人员运用从不同角度拍摄的 2D 图像构建 3D 场景。现在只需几秒即可生成场景,而且 3D 渲染成品的精细程度与 NeRF 模型的训练时长成正比。

在 2022 年的 SIGGRAPH 计算机图形会议上,NVIDIA 的研究人员发布了四个神经图形基础样例(以及预训练数据集,均属于 Instant-NGP 训练工具集)。人们可以借此用自己的数据创建 NeRF。这些研究人员凭借该项成果获得了最佳论文奖,《时代》周刊也将 Instant NeRF 评为了 2022 年度最佳发明。

Instant NeRF 不仅能够加快 NeRF 渲染,还可通过 NVIDIA RTX 和 GeForce RTX 台式电脑和笔记本电脑的 GPU 完成整个图像重建过程。虽然场景渲染时长取决于数据集规模、图像和视频源内容等多种因素,但 AI 训练并不需要服务器级或基于云的硬件。

NVIDIA RTX 工作站和 GeForce RTX PC 是满足 NeRF 渲染计算需求的理想之选。NVIDIA RTX 和 GeForce RTX GPU 配备专用的 AI 硬件加速器 Tensor Core,可为在本地运行生成式 AI 提供强大动力。

各就各位,整装待发,强势出击

开启 Instant NeRF 探索之旅,了解辐射场并以全新方式体验画面之美。

开发者和技术发烧友可以下载源代码库进行编译。非技术用户也可以从 GitHub 上下载 Instant-NGP 软件的 Windows 安装程序。

虽然此安装程序适用于多种 RTX GPU,但拥有最新架构的 GeForce RTX 40 系列和 NVIDIA RTX Ada Generation GPU 才能充分发挥它的实力。

《Instant NeRF 入门》指南在介绍功能的同时,也将引导用户完成全程操作,包括加载“NeRF Fox”等单个基础样例,以便了解可实现的效果。详细说明和类似上文的视频演示针对如何使用自定义数据创建 NeRF 进行了讲解,包括获取优质输入图像的方式、基于源代码编译代码库的技巧等。该指南也针对 Instant NeRF 图形用户界面的使用、场景参数优化、基于场景创建动画等内容进行了说明。

图像、视频、现实的层层递进

借助 AI 将图像变为 3D 场景已令人惊叹,但更神奇的是进行 3D 创作。

从 Instant NeRF 的一项最近更新开始,用户可以基于静态图像进行场景渲染,模拟置身虚拟环境之中,在 3D 空间里自由移动。用户只要在虚拟现实 (VR) 环境中戴上头显设备,就将完全置身新的世界,感受身临其境的体验。

其中蕴藏的潜力几乎是无穷无尽的。

举例而言,房屋中介可以创建并分享 3D 房产模型,升级虚拟看房体验;零售商可以通过一组图像和 RTX GPU 上运行的 AI 在网店中展示产品。这些 AI 模型能驱动创造力,让其他行业也能利用身临其境的 3D 体验。

使用 Instant NeRF 即可在 VR 中轻松清理场景,降低了高品质 NeRF 的创建难度。

下载 Instant-NGP 开始创作之旅。

生成式 AI 正改变各类游戏、视频会议和互动体验。


审核编辑:刘清
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    5496

    浏览量

    109101
  • gpu
    gpu
    +关注

    关注

    28

    文章

    5099

    浏览量

    134471
  • 无人机
    +关注

    关注

    234

    文章

    11139

    浏览量

    193345
  • 硬件加速器
    +关注

    关注

    0

    文章

    43

    浏览量

    13345

原文标题:“动”起来的图片:NVIDIA Instant NeRF 将图像变为 3D 场景

文章出处:【微信号:NVIDIA-Enterprise,微信公众号:NVIDIA英伟达企业解决方案】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    仅使用智能手机在NVIDIA Isaac Sim中重建场景

    使用 iPhone 拍摄照片,到利用 3DGUT 进行 3D 场景重建,再到重建的场景导入 NVIDI
    的头像 发表于 11-10 14:03 432次阅读

    使用NVIDIA AI Blueprint打造3D世界

    在传统工作流中,建模师必须构建占位模型、低精度资产来填充 3D 场景,优化核心资产以完成场景。之后,可以优化、细化并最终完成视觉效果。
    的头像 发表于 09-23 14:35 758次阅读

    玩转 KiCad 3D模型的使用

    “  本文将带您学习如何 3D 模型与封装关联、文件嵌入,讲解 3D 查看器中的光线追踪,以及如何使用 CLI 生成 PCBA 的 3D 模型。  ”   在日常的 PCB 设计中,
    的头像 发表于 09-16 19:21 1.1w次阅读
    玩转 KiCad <b class='flag-5'>3D</b>模型的使用

    iTOF技术,多样化的3D视觉应用

    视觉传感器对于机器信息获取至关重要,正在从二维(2D)发展到三维(3D),在某些方面模仿并超越人类的视觉能力,从而推动创新应用。3D 视觉解决方案大致分为立体视觉、结构光和飞行时间 (TOF) 技术
    发表于 09-05 07:24

    索尼与VAST达成3D业务合作

    与Tripo AI的高精度3D生成能力,打造从内容创作到沉浸式展示的全链路解决方案。此次合作推动3D技术在展览、零售、教育等场景的普惠化应用,同时也将为元宇宙、工业设计、
    的头像 发表于 08-28 17:32 1031次阅读

    生成式 AI 重塑自动驾驶仿真:4D 场景生成技术的突破与实践

    生成式AI驱动的4D场景技术正解决传统方法效率低、覆盖不足等痛点,如何通过NeRF3D高斯泼溅等技术实现高保真动态建模?高效生成极端天气等长尾场景
    的头像 发表于 08-06 11:20 4812次阅读
    生成式 AI 重塑自动驾驶仿真:4<b class='flag-5'>D</b> <b class='flag-5'>场景</b>生成技术的突破与实践

    3D打印能用哪些材质?

    3D打印的材质有哪些?不同材料决定了打印效果、强度、用途乃至安全性,本文介绍目前主流的3D打印材质,帮助你找到最适合自己需求的材料。
    的头像 发表于 07-28 10:58 2513次阅读
    <b class='flag-5'>3D</b>打印能用哪些材质?

    TechWiz LCD 3D应用:FFS仿真

    建模任务 堆栈结构 建模过程 2.1使用TechWiz Layout绘制各层掩模版平面图 2.2创建堆栈结构,并生成3D结构 2.3 使用TechWiz LCD 3D进行各项参数计算 3. 结果分析
    的头像 发表于 07-14 14:08 449次阅读
    TechWiz LCD <b class='flag-5'>3D</b>应用:FFS仿真

    一种适用于动态环境的3DGS-SLAM系统

    当前基于神经辐射场(NeRF)或3D高斯泼溅(3DGS)的SLAM方法在重建静态3D场景方面表现
    的头像 发表于 06-13 10:10 993次阅读
    一种适用于动态环境的<b class='flag-5'>3</b>DGS-SLAM系统

    3D AD库文件

    3D库文件
    发表于 05-28 13:57 6次下载

    NVIDIA助力影眸科技3D生成工具Rodin升级

    在当今数字化与 AI 飞速发展的时代,3D 生成技术正逐渐成为推动各行业创新的关键力量。影眸科技(上海)有限公司专注于 3D 生成领域的探索,积极推动领先实验室科研成果的民用化、商业化,探索前沿
    的头像 发表于 04-27 15:09 1014次阅读

    一种以图像为中心的3D感知模型BIP3D

    在具身智能系统中,3D感知算法是一个关键组件,它在端侧帮助可以帮助智能体理解环境信息,在云端可以用来辅助生成3D场景3D标签,具备重要的研究价值。现有主流算法主要依赖于点云作为输入
    的头像 发表于 03-17 13:44 961次阅读
    一种以<b class='flag-5'>图像</b>为中心的<b class='flag-5'>3D</b>感知模型BIP<b class='flag-5'>3D</b>

    DLP9500 DMD应用在静态3D打印场景,正常工作半小时左右,DMD全屏出现雪花点,且重新上电不可恢复怎么解决?

    DLP9500 DMD应用在静态3D打印场景,正常工作半小时左右(5分钟会对DMD reset一次),DMD全屏出现雪花点,且重新上电不可恢复。已排除散热、静电等因素。还有可能是什么原因导致的这种现象?
    发表于 02-19 07:14

    SciChart 3D for WPF图表库

    剔除/重新采样算法的混合提供。 借助 SciChart 的 WPF 3D 图表库,现在可以实时显示 16,000 x 16,000 个表面网格(静态)或 1,000 x 1,000 个表
    的头像 发表于 01-23 13:49 1258次阅读
    SciChart <b class='flag-5'>3D</b> for WPF图表库

    AN-1249:使用ADV8003评估板3D图像转换成2D图像

    电子发烧友网站提供《AN-1249:使用ADV8003评估板3D图像转换成2D图像.pdf》资料免费下载
    发表于 01-08 14:28 0次下载
    AN-1249:使用ADV8003评估板<b class='flag-5'>将</b><b class='flag-5'>3D</b><b class='flag-5'>图像</b>转换成2<b class='flag-5'>D</b><b class='flag-5'>图像</b>