0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

涂鸦3D全屋智能方案:基于机器人建图+On-App AI算法美化,重新定义空间智控体验

涂鸦开发者 2025-12-17 18:11 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着AI云计算等前沿技术的发展,全屋智能正从“以设备为中心”迈向“以空间为中心”的高阶形态,用户越来越期待“走进自己的家去操作设备”

然而,当前大部分智能家居产品普遍以独立面板在App中呈现,缺少一个直观场景来展示家庭里的所有设备及其使用状态,用户需反复切换不同界面来进行操作,交互成本高。即便部分产品引入了3D可视化,其模型也相对粗糙,缺少动态环境的实时反馈(如光照、湿度、风效等)。

为了让用户拥有更沉浸式的智能空间体验,涂鸦智能推出基于机器人的3D全屋智能,颠覆传统设备控制方式,构建高保真、可交互的3D家庭场景,以三大核心维度重新定义智控体验:

技术升级:AI驱动空间智能进化。机器人+AI算法自动生成完整户型图,自研算法和多项核心能力实现智能设备复杂动态效果模拟

场景升级:从单一控制到一键掌控。通过涂鸦标准化接入能力,支持设备在3D场景中快速实现智能联动与一键实时控制。

体验升级:从设备列表到空间沉浸。用户无需再在碎片化面板中切换操作,可在直观的3D全景中体验沉浸式交互。


为了满足看官们的好奇心,我们先奉上本次的核心能力视频:

机器人建图+On-App AI算法美化

自动生成家庭户型图

3D全屋智能的基础,是生成家庭户型地图。目前市面上的一些3D全屋智能产品,在户型图生成上主要有两种方式:一种是用户手动上传,由算法或AI进行数据识别和渲染,精准美观,但获取户型图不易;另一种是用户自画户型图,操作繁琐,比例尺不好掌握,用户使用心智成本高。

基于此,涂鸦给出了更简单的方案有户型图的用户,支持手动上传,并由AI自动识别建模;没有户型图的用户,也无需困扰,涂鸦运动子系统提供无缝解决方案:搭载该子系统的激光扫地机能够自动探索建图,通过SLAM算法生成点云数据,自动生成家庭户型图,简单便捷,比例准确。

涂鸦运动子系统基于TuyaOS架构,集成高效自主建图、精准定位与规划算法,开发者可通过一站式技术矩阵实现感知-决策-执行的全栈式闭环,大幅降低移动智能硬件开发门槛,为3D全屋智能奠定坚实基础。”戳这里,看涂鸦运动子系统更多核心技术能力。

虽然,机器人已经能够解决建图的问题,但SLAM算法生成的点云地图不够规整,边线会产生不规则锯齿状,在生成3D时影响整体美观度。

为了解决户型规整度问题,涂鸦技术团队经过自研算法,对扫地机方案进行更新,由原来使用opencv的方式对户型进行轮廓识别和形态学调整,转变为使用特定扫地机户型算法,最终完美解决了该问题。我们来看看美化前后有什么变化吧~

c376f6f8-db30-11f0-8ce9-92fbcf53809c.png

全新的扫地机户型算法基于On-App AI技术架构,支持在App上实时生成户型数据,不仅能够实现户型图规整化处理,还能够识别出对应的房间通道(门)的位置,完全能够支持3D全屋智控的进阶需求。

在此基础上,涂鸦还支持多楼层3D全屋建模,满足复杂空间结构与场景下的智控需求。

在“真实”的Mini空间里

与智能设备无缝联动

一个完整的“家”,建立户型、家具、设备等静态模型还远远不够,实现与真实环境的交互体验才是我们的核心目标。面对各类设备需要呈现的不同动态效果和模型难度,涂鸦给出了更逼真和人性化的方案,让“所见即所控”真正落地,我们一起来感受下吧。

01

窗户

为了让整体户型更加仿真,涂鸦在完全闭合的模型外墙中嵌入了窗户——通过模型腐蚀外加反射器的能力,实现了逼真的反射与透视效果。此外,窗户还将根据天气预报应用不同的效果。看~这就是您家的大落地窗。

c39fd99c-db30-11f0-8ce9-92fbcf53809c.gif

02

全屋灯光(照明)

在3D全屋智控中,光反射是营造真实感的核心要素。为了模拟真实世界的光照效果,涂鸦基于自研Shader算法,深度优化了光照反射模型,同时将光照模型通过设备联动的方式,与涂鸦App家庭下的照明产品打通,用户可以通过设备或者3D模型,实现虚拟场景与真实设备的无缝联动


03

空调风效(大家电)

除了联动照明产品给3D场景添加真实的光照反射外,大家电中的空调风效也是一个极大的难点。为了模拟真实的空调出风效果,如何让空调出风既具备流动感,又呈现光影层次,是一个编程难点。为了解决该问题,涂鸦透过在GPU上进行编码,利用GPU的算力来对风的流动进行物理模拟,从而创造出来一个可见、可感、可控的空调出风效果。

c3c41a46-db30-11f0-8ce9-92fbcf53809c.gif

04

窗帘&风扇(小家电)

在窗帘的智控中,视觉表现远不止“开”与“关”两个状态——真正的挑战在于如何真实还原其运动过程中的褶皱与折叠动态。我们细致观察了真实窗帘在滑轨牵引下的收放过程,捕捉其运动规律,在3D场景中还原出了高度拟真的动态效果,达到如现实般流畅生动。

c3d845fc-db30-11f0-8ce9-92fbcf53809c.gif

在风扇的3D效果中,独立控制扇叶与保护罩的旋转逻辑也是相对棘手的问题。例如,用户可能希望扇叶转得更快一些,而保护罩保持静止或低速转动,这在整体模型中很难实现。为此,我们通过建模软件对风扇模型进行部件拆分,为每个风扇部件添加独立可控的动画,再将部件组合绑定,导出暴露至代码中,即可通过逻辑精准驱动各部件。无论是“扇叶狂转、罩体静止”,还是“扇叶不转,保护罩转”,都能灵活实现。

c3fa9b3e-db30-11f0-8ce9-92fbcf53809c.gif

05

温湿度(传感)

湿度传感器作为家庭常见设备,如何在3D全屋场景中实现直观、沉浸式的可视化呈现,是设计与技术融合的关键挑战。涂鸦通过深入探索与创新,巧妙对房间墙体叠加高光循环效果,模拟温湿度信息在空间中的动态流动与渗透,让抽象数值自然融入环境氛围,实现温湿度可见可感的沉浸式体验。

c414b992-db30-11f0-8ce9-92fbcf53809c.gif

06

安防设备(IPC)

目前,安防设备基本上是每个家庭必备的智能设备之一。但在3D全屋智控场景中还原其核心能力——实时视频流播放,却是一项极具挑战的技术工程。不仅要精准呈现摄像头的物理模型与视角特效,还要对视频流进行处理和播放,这涉及一系列的复杂能力集。

涂鸦机器人与IPC团队共同打造的高性能、高灵活的音视频SDK【Nebula】,成为3D智控中视频设备的核心技术底座,让视频流无缝嵌入3D场景,实现点击即看的沉浸式安防体验,真正让3D不止于模型,更承载实时感知。

c43ee97e-db30-11f0-8ce9-92fbcf53809c.gif

07

其他设备和联动

智能家居产品种类繁多——从风扇、门锁到照明、空调,每一种都需在3D全屋智控中实现精准联动。为此,涂鸦提供了一套标准化接入方案:

户型图:如果您已有户型图或户型数据,可通过涂鸦提供的方式直接无缝对接,获得全屋智控渲染能力。

设备模型:基于涂鸦的DP协议,针对所有设备模型,只需提供DP能力映射集,即可在涂鸦小程序或者Web项目上,实现您对家庭设备的全屋控制。


后续涂鸦将持续对产品进行深度打磨和体验提升,不断探索行业能力的边界。3D全屋智能还有更多的想象,涂鸦邀请开发者们,一起探索未来。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    214

    文章

    31682

    浏览量

    224614
  • AI
    AI
    +关注

    关注

    91

    文章

    42161

    浏览量

    303154
  • 涂鸦智能
    +关注

    关注

    7

    文章

    327

    浏览量

    20789
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    2026年中国十大机器视觉公司的决胜逻辑:栈能力与场景深耕

    3D视觉感知领域的龙头,专注于深度视觉传感器及核心算法的研发,为机器人3D扫描、生物识别等行业客户及全球开发者提供高性能的3D视觉传感器及
    发表于 05-15 09:16

    基于米尔RK3576核心板的国产割草机器人解决方案

    。 国产算法兼容 :支持与国内SLAM方案商(如科沃斯、追觅等生态伙伴)的算法快速适配,缩短产品落地周期。 3. 执行层:实时控制与丰富接口 割草
    发表于 04-24 17:31

    INDEMIND三大AI平台助推机器人产业革新

    从“自动化工具”到“自主智能终端”,机器人产业正经历深刻变革。在这一进程中,空间智能技术作为连接感知与决策的关键桥梁,正重新定义
    的头像 发表于 04-15 09:37 1495次阅读

    激光雷达助力泳池水下机器人+定位覆盖

    激光雷达助力泳池水下机器人+定位覆盖
    的头像 发表于 02-25 14:24 433次阅读
    激光雷达助力泳池水下<b class='flag-5'>机器人</b><b class='flag-5'>建</b><b class='flag-5'>图</b>+定位<b class='flag-5'>全</b>覆盖

    小型自重构机器人能不能帮忙做一个?

    :ESP32S3 小主板 多个这样的模块**对接 → 形成自重构机器人**。 你要的话,我可以**直接给你 3D 图纸(STL)**。 --- # 四、控制方案(我给你
    发表于 02-21 19:24

    再谈低温烧结银的应用:从春晚四家机器人出镜的幕后推手说起

    **< 5%**。 保障春晚机器人360° 感知、毫米级定位、动态平衡的稳定性。 (3AI芯片和主控:计算大脑 用于芯片倒装、3D 堆叠、热界面材料TIM,热阻低至0.12**
    发表于 02-17 14:07

    3月赴沪!Vision China 2026(上海)邀你共探机器视觉与AI机器人的融合未来

    ,驱动工厂数智化跃迁” 为核心主题,覆盖机器视觉核心部件、机器视觉元件和配件、系统解决方案和集成、智能视觉装备、AI与工业
    的头像 发表于 01-13 15:30 776次阅读
    <b class='flag-5'>3</b>月赴沪!Vision China 2026(上海)邀你共探<b class='flag-5'>机器</b>视觉与<b class='flag-5'>AI</b>、<b class='flag-5'>机器人</b>的融合未来

    高精度机器人控制的核心——基于 MYD-LT536 开发板的精密运动控制方案

    ISP多媒体接口,适合构建机器人视觉-运动融合系统,实现工件识别与动态定位。 3. 支持闭环控制与误差校正 可结合高分辨率编码器反馈数据,运行机器人闭环控制算法; 利用
    发表于 11-14 15:48

    奥比中光领跑韩国机器人3D视觉市场

    近日,国际权威行业研究机构Interact Analysis发布《韩国商用及工业移动机器人3D视觉市场分析》报告(以下简称“报告”)。数据显示,奥比中光在韩国商用和工业移动机器人3D
    的头像 发表于 10-23 16:27 966次阅读

    小萝卜机器人的故事

    , “请给我联网” 我的心都碎了, 公司倒闭APP失效, 小萝卜成了孤儿, 现在的方案是, 用ESP32S3-M0, 替代原来芯片, 实现AI语音运动, 大模型接入, 视像头连接
    发表于 10-23 05:24

    人工智能正在重新定义嵌入式系统

    人工智能AI)正在从设计到功能等各个层面重新定义嵌入式系统。
    的头像 发表于 09-04 16:57 2402次阅读

    普渡科技推出3D感知AI扫地机器人PUDU MT1 Max

    在持续探索机器人技术与真实场景深度融合的进程中,普渡机器人以场景驱动创新,正式推出PUDU MT1 Max 3D感知AI扫地机器人。它在MT
    的头像 发表于 08-25 15:47 1614次阅读

    黑芝麻智能AI机器人计算平台荣膺国际大奖

    黑芝麻智能AI机器人计算平台荣膺新加坡年度"GO! Technology Utilisation Winner",作为面向新一代机器人
    的头像 发表于 08-07 17:35 2496次阅读

    基于NVIDIA AI3D机器人感知与地图构建系统设计

    机器人必须感知和理解其 3D 环境,才能安全高效地行动。这一点在非结构化或陌生空间中的自主导航、对象操作和远程操作等任务尤为重要。当前机器人感知技术的进展,越来越多地体现在通过统一的实
    的头像 发表于 07-04 14:31 1453次阅读
    基于NVIDIA <b class='flag-5'>AI</b>的<b class='flag-5'>3D</b><b class='flag-5'>机器人</b>感知与地图构建系统设计

    涂鸦AI画画机器人开发方案

    AI画画机器人作为人工智能与艺术融合的创新产物,如今火得一塌糊涂。全球首幅由AI机器人创作的画作《AI
    的头像 发表于 06-12 18:17 1676次阅读
    <b class='flag-5'>涂鸦</b><b class='flag-5'>AI</b>画画<b class='flag-5'>机器人</b>开发<b class='flag-5'>方案</b>