0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

一个名为Metaverse的工具来帮助人们快速生成逼真的训练数据

nlfO_thejiangme 来源:未知 作者:李倩 2018-10-08 15:20 次阅读

从事过计算机视觉任务的小伙伴对于数据一定有着难以言说的情感。数据集的大小和质量直接影响着算法的精度和性能。而且冗长的、海量的图像标注工作也让很多中小团队对于视觉任务的训练打起了退堂鼓。此外对于物体的位子,表面法向量以及深度等信息,对于人工来说几乎是无法很容易地进行标注。

为了解决这一问题,来自Greppy研究人员提出了一个名为Metaverse的工具来帮助人们快速生成逼真的训练数据。它可以基于CAD模型和渲染、方便的创建出逼真丰富的数据,同时生成RGB、深度图、法向量图、位姿标注、对象及其每一部分的掩膜。

合成数据的想法由来已久,在github上有很多类似的项目来生成各种各样的数据,从基于统计的方法到GAN应有尽有,但这些方法都存在各种不用的问题。

有的算法需要使用者具有一定的编程能力,而有的算法生成的结果却又不是那么逼真。我们真正需要的是一个能够方便高效地生成大规模训练数据来训练网络完成对新物体的计算机视觉任务。同时还需要在没有光线追踪的情况下实现对于目标图像逼真的生成,这也是需要克服的一大挑战。

为了解决这些问题,研究人员开发了这一基于网页端的工具,只需要将目标物体的3D模型上传到对应的界面应用不同的材料来对它进行更加逼真的表现,随后进行表面材料选取和光照渲染即可。

我们以咖啡机作为例子来看看如何使用这一工具的。如果我们想要训练计算来识别咖啡机,我们就需要上传下图所示的两个咖啡壶的CAD模型,这是由于咖啡机可能是打开也可能是关闭的。

下一步我们只需要为咖啡机的每个表面设置预先设计的表面材料,点点鼠标就可以完成材料的配置。为了满足需求,研究人员还提供了很多不同逼真材料的库供用户使用。同时也可以根据需要设计自己的材料。

这一软件也为用户提供好了方便标注物体每一部分的工具,我们可以对感兴趣的部分进行点选。你不需要会用3D建模软件,也不需要编程即可完成。

最后一步也是最有意思的一步,就是选择你需要采集图像的“相机”了。这一工具需要根据相机的分辨率、参数、视野以及双目立体参数来渲染出更加精确的图像。目前网站刚刚到达beta版本只包含了两个相机模型:Zed mini和Intel D435,但是用户可以自己创建个性化的相机模型来生成图像。

然后剩下的就是交给电脑的工作了。工具可以自动地生成成千上万的场景,包括了不同的位姿、数量、相机角度和光照条件下的目标。所有生成的结果都进行了像素级的自动标注。后台通过GPU云服务进行一段时间的渲染,然后就可以得到自己的的数据集了。

利用这些数据,就可以进行深度学习任务啦,无论是检测、分割都可以有丰富的数据来上手。

这一工具对于想要训练针对性的物体、零件或者自己设计的工件等具有很大的作用,在拥有设计的CAD模型后就可以方便的生成海量数据来实现自己的demo。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 计算机视觉
    +关注

    关注

    8

    文章

    1575

    浏览量

    45555
  • 数据集
    +关注

    关注

    4

    文章

    1174

    浏览量

    24286

原文标题:为计算机视觉生成大规模合成、标注仿真数据的新方法

文章出处:【微信号:thejiangmen,微信公众号:将门创投】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    逼真的水淹电脑屏保_可能会吓坏你哦

    逼真的水淹电脑屏保_可能会吓坏你哦 
    发表于 06-23 12:34

    谁有做过这种96灯珠仿真火焰效果火把灯的案子?

    做到这种逼真的效果,谁有做过的能给提示吗?我怎么写都写不出这种效果,愁。。。16路,路控制6灯, 原理图见附件`
    发表于 12-08 10:00

    如何利用MultiGen Creator和Vega设计虚拟训练场?

    MultiGen Creator是 由 MultiGen—Paradigm公司开发的种用于对可视化系统数据库进行创建和编辑的交互工具。MuhiGen Creator是世界上领先的实时三维数据
    发表于 08-13 07:58

    如何使用Ziva Dynamics创建逼真的角色动画

    了解Ziva Dynamics如何帮助您创建逼真逼真的角色和生物动画!
    的头像 发表于 11-08 06:23 6519次阅读

    机器人手臂Panda能灵活安全的帮助人们处理寻常任务

    快速发展的机器人助手领域(有时亦被称为协作机器人),正在使机器人成为一种更加廉价、灵活和安全的工具帮助人们处理寻常任务。慕尼黑的Franka Emika希望凭借自己的机器人手臂Panda能抓住这个机会。
    发表于 12-01 11:56 929次阅读

    微软首席技术官认为 未来理解人工智能能帮助人们成为更好的公民

    北京时间1月21日消息,微软首席技术官凯文·斯科特(Kevin Scott)认为,未来,理解人工智能能帮助人们成为更好的公民。
    发表于 01-22 10:45 466次阅读

    当前生成图像最逼真的BigGAN被谷歌超越!造假效果更为逼真

    当前生成图像最逼真的BigGAN被超越了!
    的头像 发表于 03-11 15:28 3749次阅读

    AI工具将低像素的面孔变成逼真的图像

    DUL研究人员创建了PULSE(通过潜伏空间探索进行照片上采样),以根据低像素源数据创建更逼真的图像。在今年早些时候分发的研究论文中,该团队解释了他们的方法与早期从8位图像生成逼真的
    的头像 发表于 07-07 09:43 2084次阅读

    沈向洋:AI帮助人们释放创造力

    12月30日消息,近日,小冰公司董事长、清华大学双聘教授沈向洋应吴恩达教授邀请,展望了2021年AI行业发展。沈向洋认为人工智能社区将创造出更多工具来释放人类的创造力。人工智能将帮助世界各地的人们,以各有态度的方式去沟通和表达情
    的头像 发表于 12-30 14:30 1516次阅读

    NVIDIA CloudXR为客户提供逼真的虚拟现实工具与应用

    英国公司使用 NVIDIA CloudXR 帮助企业向任何 VR 设备提供逼真的虚拟产品和引人入胜的 XR 体验。
    的头像 发表于 01-04 17:12 3142次阅读

    NVIDIA提供用于AI训练的合成数据生成工具

    提供合成数据生成工具和服务的企业以及开发者现在可以使用 Omniverse Replicator SDK 构建自定义、物理级精确的合成数据生成
    的头像 发表于 07-03 10:06 1469次阅读

    帮助人们从任何ATM提取现金的开源设计

    电子发烧友网站提供《帮助人们从任何ATM提取现金的开源设计.zip》资料免费下载
    发表于 11-25 14:35 0次下载
    <b class='flag-5'>帮助人们</b>从任何ATM提取现金的开源设计

    构建可帮助人们做早餐的桌面智能机器人手臂

    电子发烧友网站提供《构建可帮助人们做早餐的桌面智能机器人手臂.zip》资料免费下载
    发表于 12-28 10:36 3次下载
    构建可<b class='flag-5'>帮助人们</b>做早餐的桌面智能机器人手臂

    SIGGRAPH 2023 | 贴图帮手:NVIDIA Research 展示生成式 AI 如何帮助创建和编辑逼真的材质

    研究人员展示能够快速创建和编辑材质的 AI 技术,助力加速 3D 工作流。 在 SIGGRAPH 上,NVIDIA 的研究人员展示了一种可以帮助艺术家快速创建和迭代 3D 场景材质的生成
    的头像 发表于 08-10 20:15 383次阅读

    生成式AI如何帮助创建和编辑逼真的材质?

    精细的把控。NVIDIA Picasso 将提供这些功能,使企业、软件创作者和服务提供商能够使用其经过完全授权的数据来开发自定义生成式 AI 材质模型。
    的头像 发表于 09-01 15:36 476次阅读