商汤科技运用AI大模型实现实景三维重建

近日，在北京建筑大学举行的2024第八届北京国际城市设计大会上，商汤科技把这些“活过来”的文物实景三维也带到了现场。

运用AI大模型以及3DGS和NeRF技术，商汤“琼宇”赋能大量历史文化遗址、古建筑等实景三维重建，让历史文化资产实现了数字化收集和利用，高效还原古建筑真实场景，解决了三维模型轻量化问题，助力古建筑保护与传承，还提供游客在Web端进行线上漫游参观体验。

这一技术还可运用在整个城市的三维生成重建，赋能城市信息模型构建，支持城市建设规划与管理。目前，商汤“琼宇”已在全国范围实现上千个场景的落地，服务客户超过700个。

北京国际城市设计大会上，商汤科技数字经济研究院院长李森发表主题演讲《人工智能支撑数字住建的探索与实践》。他表示，作为商汤日日新大模型体系的重要组成，商汤“琼宇”在进行城市级三维生成重建上，无论效率，还是精度和效果，都创造了行业新高度。

在城市建设领域，三维重建可以让数字资产与物理世界实时交互，推进城市建设数字化发展。例如，城市水利部门需要掌控城市地下管网的数据信息，以推进管网建设及管理。传统方法需要工人在每一段管网拍摄照片，分析确认管网建设和规划是否有偏差，然而，人工作业不但效率低，且地下作业存在一定风险。

而今，通过商汤“琼宇”三维重建，只需要360全景相机进行视频采集，就可以实现高效采集和重建，让隧道、管网甚至岩层裂缝都清晰可见。在项目的不同阶段，工程团队可应用“琼宇”进行数据采集及模型重建，实现快速回溯和精准定位。同时“琼宇”还可作为日常巡检的辅助，为裂缝、渗水、形变等问题提供三维模型。

针对高难度复杂场景，“琼宇”还能进行城市级的厘米级高精度复刻，最大程度保留复杂细节，呈现真实感。在上海临港的商汤AIDC智算中心项目中，“琼宇”不但解决了植被塑料化、建筑边缘锯齿、镂空物体扭曲等问题，在质感上也精确还原，突破了玻璃幕墙等高反光、镜面材质复刻的行业难题。

除了实景三维重建，在城市建设规划与管理方面，商汤还提供遥感数据信息的智能分析，帮助进行“时空一体化管理”。

商汤“地界”遥感大模型能够基于多源遥感影像，自动化、智能化的快速提取信息，是国内第一个超过3.5亿参数的通用遥感大模型产品。它提供超过50种地物类型的高精度自动遥感解译分析能力，适配全国范围地貌、季节以及不同卫星传感器，综合精度超过90%，能够广泛用于建筑、道路、水体、植被、耕地、工地、大棚、堤坝、固化池、交通设施等地物识别以及地表变化检测。

目前，模型在全国超过20个省、超过40家省级卫星中心和国土测绘单位有效支撑自然资源智能化监测监管，市场占有率超过70%。例如，上海市大数据中心应用商汤“地界”遥感大模型，对全市域遥感大数据的智能分析，赋能水稻种植面积核实、全市建筑工地监管等业务，未来还会在固废治理、高标农田监管、大棚管理、撂荒地治理等方面开展应用。

商汤一直以来积极推进将人工智能技术应用在数字住建领域。今年7月，在住建部的支持下，商汤科技与中国建筑出版传媒有限公司（建工社）共同发布「住建领域法规标准知识大模型」，推动住建领域标准数智化转型。模型通过融合海量住建行业标准、法律条款、设计及工艺规范等知识库数据，提供智能问答、智能集成、智能查重、智能比对等功能，如今已成为住建领域从业者重要的助手工具。

此次大会，商汤通过展示大模型在住建领域的更多创新与应用，包括构建城市数字孪生底座，结合AI和遥感技术服务城市管理，运用数字资产档案等进行历史文化保护等，让人们看到了大模型赋能住建领域的更多可能。李森介绍，正在研发的城市三维生成大模型，可将三维重建大模型与视频生成大模型有机结合，突破三维重建的重叠度要求和视频生成的可控性局限，未来将进一步赋能城市的长期规划。

随着今年AI在诺贝尔物理学奖和化学奖上的新突破，在许多学科领域，新的范式已经逐步开启，通用人工智能的时代正快速到来。面向AI 2.0时代，商汤在“大装置-大模型-应用”三位一体的核心战略和驱动下，将持续释放源源不断的新质生产力，推动住建领域全生命周期的智能化升级。