0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA 助力 KIRI Innovations, 用 AI 赋能 3D 内容生成

NVIDIA英伟达企业解决方案 来源:未知 2023-03-17 12:05 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

KIRI Innovations 是一家面向全球市场的 AI 公司,致力于通过前沿技术赋能 3D 内容制作,降低 3D 内容生产的门槛。公司拥有 3D 重建引擎 KIRI Engine,通过手机拍照即可实现对物体的超写实 3D 建模。

上线短短几个月的时间内,KIRI Engine 全球用户已突破 30 万人,且还在快速增长中,其中包括 Google、Roblox、EA、Epic Games、Meta 等元宇宙企业用户。用户通过 KIRI Engine App 或 KIRI Engine 网页端将围绕物体拍摄的照片上传至云端进行处理,就可以获得和现实物体一模一样的 3D 模型素材,再将这些逼真的 3D 模型素材应用在各种包括 VR 场景、3D 游戏、影视特效在内的 3D 内容制作中。

KIRI Engine 的背后,是一套部署在云端的神经网络重建算法,能够通过多角度照片集或视频,对现实物体生成具有纹理材质信息和几何信息的超写实 3D 模型。这种重建算法的计算量非常巨大,使用传统解决方案意味着消耗大量的算力资源和成本。KIRI Engine 使用 NVIDIA V100NVIDIA T4 GPU在云端进行计算,V100 负责进行复杂的神经网络训练,而 T4 则负责模型推理,将训练好的模型移至 T4 GPU 的主机上,通过输入新的数据来获得想要的结果;T4 也会进行相对简单的图像处理和点云匹配计算任务,同时依靠 NVIDIA CUDA 进行加速,使得计算成本得以减少数百倍至每个模型几角钱。

KIRI Engine 的核心价值不仅在于用更低的成本为 3D 开发者提供 3D 重建工具,更在于通过快速增长的用户在云端积累海量 3D 数据集。随着 AI 带来的创作变革,AI 生成 3D 模型将会是下一个生成式 AI 的主战场,而高度标准化的 3D 数据集是 AI 生成 3D 模型的必要条件。在生成式 AI 全面到来的时代,KIRI 正在面对一个更大的市场和全新的挑战。

如何兼顾降低计算成本

与提升 3D 重建水平

传统的照片 3D 建模技术对 CPU 非常依赖,但 CPU 的硬件限制使得这种方法的成本过高,所以其应用领域主要是资金充裕的大型企业和政府项目。人们与信息的交互方式正在因 VR/XR 的技术突破而经历从 2D 向 3D,和从信息互联到空间互联的范式转移。这种范式转移将极大带动市场对 3D 内容的需求,显然过去高成本的 3D 建模技术无法适应市场的变化。因此,需要探索一种新的计算方式,在满足不断增加的 3D 重建需求的同时,还要颠覆性地降低计算成本。

ccc2ce22-c476-11ed-bfe3-dac502259ad0.png

three.js 脚本在 Github 的周下载量

three.js 脚本作为制作 3D 内容必不可少的工具之一,其下载量趋势能侧面反映出全球 3D 内容的增长趋势;而从表中可以看出 three.js 脚本在 Github 的周下载量在一年的时间内翻了一倍,以此足以看出 3D 化的范式转移在以惊人的速度渗透人们的交互方式。

在算法层面,KIRI 开创性地使用了神经网络和视觉算法混合计算的方法。这样的优势在于神经网络重建能够更好地还原一些无法被视觉算法重建的物体,例如高度反光或透明的物体,但对于特征点足够多的物体,视觉算法能够捕捉到更多的表面细节。

因为神经网络的加入,使用 GPU 是必然的选择,因此使用 CPU+GPU 异构计算,尽管拥有 CPU+GPU 的服务器价格大概会是同级别的 CPU 价格的 2 倍,但计算时间可以大概节约 11 倍。(用机器学习进行 3D 模型的纹理贴图计算,CPU 需耗时 1600 秒,但 GPU 只需 130 秒。)

同时对 3D 重建任务进行 CUDA 加速并加入扩/缩容机制 。在计算任务少的时候只使用单台 GPU 确保运行稳定,计算任务一旦开始变多,云架构能够自动扩容,最多使用数十台服务器并行运算。这样一来,通过 CUDA 加速的神经网络算法能够在大幅度降低单次运行的时间成本,而扩/缩容机制在确保用户体验的同时避免资源浪费。

NVIDIA 为 KIRI 提供高效稳定算力支持

基于以上考量,KIRI 选择 NVIDIA 的产品生态来提供支持。因为 NVIDIA 产品生态的多样性能够满足全部技术需求,且提供高效稳定的算力支持。

NVIDIA CUDA: 通过 CUDA 进行计算加速是 KIRI Engine 得以高效且低成本运行的重要原因之一。在传统纯 CPU 运行环境里,哪怕是运行最简单的 3D 重建算法也需要花费 20-60 分钟的时间。而通过 CUDA 加速后,KIRI 目前的重建算法只需要 5 分钟。(甚至 KIRI 正在努力尝试达到 25 秒内生成 3D 模型的加速。)

NVIDIA T4 GPU: T4 是 KIRI 进行运算的中坚力量,T4 拥有低延时高吞吐量,进而可以实时满足更多的请求。

NVIDIA V100:KIRI 使用 V100 来进行神经网络模型的训练。神经辐射场重建模型往往需要数个小时才能完成训练,但通过 V100 与 CUDA 的配合,再加上 KIRI 对算法的优化,目前在 KIRI Engine 上完成神经辐射场模型训练只需要 25 分钟。( KIRI 也在努力对架构和算法进行优化,力争两个月内能够将神经网络模型的训练缩减到 5 分钟以内。)

NVIDIA 助力 KIRI 平台用户增长

“目前 KIRI Engine 是全球增长速度较快的超写实 3D 模型生成平台之一,面对每天数以千计的 3D 模型生成任务,稳定高效的算力是我们得以快速成长的核心要素。” KIRI Innovations 联合创始人兼 CEO 王正男表示,“NVIDIA 的产品生态非常出色地帮我们解决了算力问题。一方面 NVIDIA 有很丰富的显卡选择,我们能够针对不同的处理任务使用不同的显卡,避免不必要的算力浪费;另一方面 CUDA 的加速机制配合我们为其量身打造的 3D 建模算法,让我们真正在速度和成本上超越了竞争对手,得以承载每天不断增长的用户需求。”

NVIDIA 初创加速计划

KIRI Innovations是 NVIDIA 初创加速计划 (NVIDIA Inception) 会员企业。NVIDIA 初创加速计划为免费会员制,旨在培养颠覆行业格局的优秀创业公司。该计划联合国内外知名的风投机构,创业孵化器,创业加速器,行业合作伙伴以及科技创业媒体等,打造创业加速生态系统。能够提供产品折扣,技术支持,市场宣传,融资对接,业务推荐等一系列服务,加速创业公司的发展。

想获得 NVIDIA 初创加速生态助力?扫描下方二维码,仅需一分钟填写意向申请表单,获得快速联系。

ccd212ce-c476-11ed-bfe3-dac502259ad0.png


原文标题:NVIDIA 助力 KIRI Innovations, 用 AI 赋能 3D 内容生成

文章出处:【微信公众号:NVIDIA英伟达企业解决方案】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    23

    文章

    4041

    浏览量

    97695

原文标题:NVIDIA 助力 KIRI Innovations, 用 AI 赋能 3D 内容生成

文章出处:【微信号:NVIDIA-Enterprise,微信公众号:NVIDIA英伟达企业解决方案】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    生成AI虚拟调试——fe.screen-sim的架构价值

    生成AI虚拟调试——fe.screen-sim的架构价值
    的头像 发表于 12-04 14:59 552次阅读
    <b class='flag-5'>生成</b>式<b class='flag-5'>AI</b><b class='flag-5'>赋</b><b class='flag-5'>能</b>虚拟调试——fe.screen-sim的架构价值

    索尼与MIIIX幕象科技达成3D内容合作

    索尼与MIIIX幕象科技工作室文旅行业创新内容共创 近日,索尼与MIIIX幕象科技工作室(以下简称:MIIIX)正式宣布达成3D内容合作:双方将依托索尼空间现实显示屏的裸眼3D技术与M
    的头像 发表于 10-09 11:46 605次阅读

    使用NVIDIA AI Blueprint打造3D世界

    在传统工作流中,建模师必须构建占位模型、低精度资产来填充 3D 场景,优化核心资产以完成场景。之后,可以优化、细化并最终完成视觉效果。
    的头像 发表于 09-23 14:35 760次阅读

    索尼与VAST达成3D业务合作

    近日,索尼空间现实显示屏与VAST旗下的3D大模型Tripo AI正式宣布达成业务合作:双方将围绕裸眼3D显示技术、AI驱动的3D
    的头像 发表于 08-28 17:32 1033次阅读

    NVIDIA通过全新 Omniverse库、Cosmos物理AI模型及AI计算基础设施,为机器人领域开启新篇章

    NVIDIA 通过全新 Omniverse 库、Cosmos 物理 AI 模型及 AI 计算基础设施,为机器人领域开启新篇章   · 全新 NVIDIA Omniverse NuRec
    的头像 发表于 08-12 11:29 1368次阅读
    <b class='flag-5'>NVIDIA</b>通过全新 Omniverse库、Cosmos物理<b class='flag-5'>AI</b>模型及<b class='flag-5'>AI</b>计算基础设施,为机器人领域开启新篇章

    生成AI 重塑自动驾驶仿真:4D 场景生成技术的突破与实践

    生成AI驱动的4D场景技术正解决传统方法效率低、覆盖不足等痛点,如何通过NeRF、3D高斯泼溅等技术实现高保真动态建模?高效生成极端天气等
    的头像 发表于 08-06 11:20 4818次阅读
    <b class='flag-5'>生成</b>式 <b class='flag-5'>AI</b> 重塑自动驾驶仿真:4<b class='flag-5'>D</b> 场景<b class='flag-5'>生成</b>技术的突破与实践

    英伦科技10.1英寸裸眼3D数码相框升级了,玩转AI文生图太cool了!

    此次升级将AI内容生成与裸眼3D显示深度结合,解决了传统3D内容制作成本高的痛点,使普通用户也
    的头像 发表于 07-03 11:31 11.8w次阅读
    英伦科技10.1英寸裸眼<b class='flag-5'>3D</b>数码相框升级了,玩转<b class='flag-5'>AI</b>文生图太cool了!

    NVIDIA AI技术助力欧洲医疗健康行业发展

    从构建全球规模最大的生物多样性数据库,到打造罕见病研究的 AI 工厂,NVIDIAAI 初创企业生态系统正持续为欧洲医疗健康领域注
    的头像 发表于 06-19 14:40 3177次阅读

    利用NVIDIA 3D引导生成AI Blueprint控制图像生成

    AI 的图像生成技术突飞猛进,从早期模型会生成手指过多的人类图像,到现在创造出令人惊叹的逼
    的头像 发表于 06-05 09:24 745次阅读

    NVIDIA助力影眸科技3D生成工具Rodin升级

    。在 NVIDIA Omniverse 平台、OpenUSD 以及 Isaac Lab 解决方案的助力下,影眸科技实现了 Rodin 平台的升级,显著提升了 3D 资产生成的速度、质量
    的头像 发表于 04-27 15:09 1017次阅读

    英伦科技光场裸眼3D显示产品在博物馆裸眼3D显示方面的应用

    英伦科技的技术突破了传统展陈的物理限制,通过高沉浸感体验提升观众参与度(据统计,采用裸眼3D的展区观众停留时间增加40%),同时为文物保护和非接触式观展提供了创新路径。未来随着AI生成内容
    的头像 发表于 03-25 10:27 862次阅读
    英伦科技光场裸眼<b class='flag-5'>3D</b>显示产品在博物馆裸眼<b class='flag-5'>3D</b>显示方面的应用

    西门子Innovator3D IC平台荣获3D InCites技术

    此前,2025年33日至6日,第二十一届年度设备封装会议(Annual Device Packaging Conference,简称DPC 2025)在美国亚利桑那州凤凰城成功举办。会上,西门子 Innovator3D IC
    的头像 发表于 03-11 14:11 1301次阅读
    西门子Innovator<b class='flag-5'>3D</b> IC平台荣获<b class='flag-5'>3D</b> InCites技术<b class='flag-5'>赋</b><b class='flag-5'>能</b>奖

    腾讯混元3D AI创作引擎正式发布

    AI技术,能够根据用户提供的提示词或图片,直接生成高质量的3D模型。这一功能极大地降低了3D内容创作的门槛,使得即使是缺乏专业
    的头像 发表于 01-23 10:33 988次阅读

    腾讯混元3D AI创作引擎正式上线

    近日,腾讯公司宣布其自主研发的混元3D AI创作引擎已正式上线。这一创新性的创作工具,标志着腾讯在3D内容生成领域迈出了重要一步。 混元
    的头像 发表于 01-22 10:26 974次阅读

    NVIDIA推出面向RTX AI PC的AI基础模型

    NVIDIA 今日发布能在 NVIDIA RTX AI PC 本地运行的基础模型,为数字人、内容创作、生产力和开发提供强大助力
    的头像 发表于 01-08 11:01 880次阅读