0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

航天宏图全栈式3DGS实景三维重建系统解决方案

航天宏图 来源:航天宏图 2025-06-27 09:28 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

一、研发背景

“实景三维中国”作为国家推进数字中国建设、提升空间地理信息服务能力的重要战略性工程,正在深度融入低空经济、智能交通、智慧城市、数字文旅和应急指挥等关键领域。三维重建是实现真实世界“实景三维”数字化表达的核心技术,通过相机、传感器等设备获取物理空间数据,并结合计算机视觉与图形学算法,将二维图像转换为三维模型。目前,主流的三维重建方法包括倾斜摄影(多视角立体重建)、激光扫描和神经辐射场(Neural Radiance Fields, NeRF)等,各具优势与局限。

近年来,3D高斯溅射(3D Gaussian Splatting, 3DGS)作为一种新兴的三维表示方法,在渲染质量和效率方面展现出显著优势。其核心思想是将三维场景表示为一组具有空间位置、协方差矩阵、不透明度和球谐系数的各向异性高斯分布,从而实现对几何结构与光照信息的统一建模。在众多三维重建与渲染技术中,3DGS具备多方面的优势。相比基于NeRF的方法,3DGS在训练和渲染速度上大幅提升,能够支持实时或交互式应用,同时依然保持较高的渲染真实感;相比倾斜摄影等传统重建方法,3DGS无需显式构建3D结构,能够更逼真地还原连续的表面细节,有效避免传统方法中常见的拼接痕迹与破面问题,并在复杂几何结构表达和动态光照模拟方面表现更为出色。

航天宏图依托在遥感测绘、空间数据处理与三维建模方面的技术积累,基于3DGS重建技术,研发了“全栈式3DGS实景三维重建系统”。该系统面向展品、展厅、数字孪生城市等多尺度应用场景,助力行业客户构建真实、可交互的三维数字空间,支撑“实景三维”数字化建设与空间智能化管理。

f9d688a8-5016-11f0-b715-92fbcf53809c.jpg

表1-1 3DGS与传统实景三维技术的对比

二、系统概述

航天宏图全栈式3DGS实景三维重建系统,贯彻从多源数据采集、自动化建模到个性化Web端显示的完整流程。系统支持无人机、手持相机等多种采集方式,结合空三计算与相机位姿优化模块,实现高质量的3DGS模型构建。建模过程高度自动化,无需复杂人工调参,可高效输出轻量、高保真的三维模型。模型可部署至浏览器端,支持多视角切换、标注和图层管理等功能,交互展示平台可按需定制,灵活对接各类业务系统。

f9ea1b48-5016-11f0-b715-92fbcf53809c.png

图2-1 全栈式3DGS实景三维重建系统框架

整体系统具有轻量高保真、全链高协同和平台可定制三大特点:

● ‌轻量高保真‌:基于3DGS建模技术,有效压缩模型体积的同时,保持高质量渲染效果,兼顾渲染效率与视觉真实感。

● ‌全链高协同‌:覆盖从数据采集、建模处理到Web端显示的完整流程,系统模块高度协同,支持各环节灵活组合部署。

● ‌平台可定制‌:Web端支持按需开发、功能拓展及系统对接,满足不同行业与场景的个性化应用需求。

该系统可满足数字展品、虚拟展厅、三维孪生城市等实景三维应用需求,支持用户高效构建真实、可交互的数字孪生空间底座。

三、关键技术

航天宏图全栈式3DGS实景三维重建系统主要包括以下四大关键技术:大规模影像空三处理、分布式3DGS重建方法、大场景模型压缩技术以及定制化Web端开发。

1大规模影像空三处理

航天宏图自研的大规模影像空三处理方法,是三维重建流程中的关键技术之一,主要用于精确解算影像的内外方位元素,并获取高精度的空间几何参数。系统首先通过图像特征提取与匹配,自动识别影像间的对应关系,进而结合控制点信息与区域网平差算法,实现稳定可靠的几何解算。

该方法融合了计算机视觉中的结构光束法与传统摄影测量技术,兼顾自动化处理效率与定位精度,适用于来自手持相机、无人机等多种平台采集的航迹式光学影像。为进一步提升性能,系统还引入连接点抽稀机制,有效减轻计算负担,在保证精度的同时显著提升解算速度。

此外,系统具备优异的大规模处理能力,支持超过100,000张影像的空三解算,满足城市级以及更大范围场景的实景三维重建需求。同时支持多节点协同处理,可根据任务规模灵活调度资源,提高整体数据处理效率,大幅缩短计算时间。

fa00e03a-5016-11f0-b715-92fbcf53809c.jpg

表3-1 拍摄要求

fa184ab8-5016-11f0-b715-92fbcf53809c.png


(左)相机位姿估计 ,(右)航线与3D点云重建结果

图3-1 无人机影像自动空三处理结果

2分布式3DGS重建方法

针对大规模场景的三维重建需求,航天宏图研发了分布式3DGS重建方法,有效解决了传统3DGS在大规模场景下训练效率低、渲染响应慢等核心瓶颈。面向城市级、区域级等超大规模场景,该方法引入多GPU并行建模策略,显著提升重建效率与渲染性能。

该方法首先构建一个低分辨率的初始3DGS模型,作为场景结构的粗略先验。在此基础上,系统自动将全局点云划分为多个空间上互不重叠的子模型。针对每个子模型,系统基于其与训练视角之间的投影覆盖关系与相机空间分布,智能筛选最相关的图像数据,确保在建模过程仅使用高相关的视角,有效提升训练数据利用率,同时抑制由低相关视角引入的渲染伪影。各子模型可在多张GPU设备上并行训练,训练完成后通过空间对齐与无缝拼接生成统一的3DGS模型,实现高效率、高精度的大规模三维建模与实时渲染,满足智慧城市、数字园区等场景下对大范围三维空间重建的精准表达需求。

fa3215e2-5016-11f0-b715-92fbcf53809c.png

(左)场景整体分块示意图,(右)单个分块区域展示

图3-2 分布式3DGS重建

3大场景模型压缩技术

为解决大规模场景下3DGS模型的存储和渲染问题,航天宏图研发了大场景模型压缩技术。3DGS模型压缩技术旨在提升大规模场景下的部署效率与终端适配能力,通过在训练过程中及训练完成后引入压缩策略,实现显存占用与存储体积的双重优化,显著减轻模型资源开销。

在训练阶段,基于并行建模框架引入在线压缩机制,系统会周期性评估每个高斯基元对训练视角的贡献程度,并依据其重要性动态剔除贡献较低的冗余点。该机制不仅有效降低了训练过程中的显存占用,还加快了模型的收敛速度,尤其适配计算资源受限的设备环境。

在训练完成后,系统还会进一步对模型进行离线轻量化处理,包括自动识别并清除离群高斯点、压缩模型存储位数等操作,从而在保证模型渲染质量的前提下,有效减小最终模型体积,提升模型的跨平台部署能力与实时加载性能。

fa4a4f0e-5016-11f0-b715-92fbcf53809c.jpg

表3-2 大场景3DGS模型压缩前后大小对比结果

4定制化web端开发

航天宏图提供定制化的Web端可视化交互能力,支持多种主流图形引擎,实现对3DGS模型的跨平台在线加载与交互式浏览。主要优势有:

● 高效渲染与广泛兼容:依托WebGL的GPU加速,可在Chrome、Firefox、Safari等主流浏览器中流畅渲染三维场景。

● 多引擎灵活集成:兼容Three.js API与社区生态,便于高效模型展示,同时支持Unity WebGL,满足更复杂的交互需求。

● 丰富的交互功能:内置自定义标注、属性弹窗、图层切换、模型剖切、测量分析等多样组件,覆盖展品、展厅、城市等多类型三维数据的精细化浏览与分析。

● 平台级扩展与集成:前端采用WebGL与JavaScript技术栈,可无缝对接政务平台、空间数据库、BIM/GIS系统,通过API实现实时数据查询与展示。

● 轻量部署与灵活定制:支持Web组件导出,界面模块化裁剪与功能拓展,适配导航控件、热力图叠加、模型动画等多样业务场景。

四、应用案例

1展品级重建

基于手持相机等设备采集数据,对单件展品进行高精度三维建模,真实还原其材质、纹理与结构细节,支持文物的在线展示、虚拟导览、三维交互学习等功能,为文物数字化保护、数字博物馆和虚拟教学等应用场景提供技术支撑。

fa5c5424-5016-11f0-b715-92fbcf53809c.jpg

表4-1 展品重建实验设置与结果分析

2展厅级重建

基于手持相机等设备采集数据,高效重建完整的室内展厅和展品,支持图文信息挂载和语音讲解等多样化功能,可实现企业数字化展厅、博物馆、虚拟会展中心等多种场景的沉浸式三维漫游展示,显著提升线上观览体验与访问流量。

fa7217b4-5016-11f0-b715-92fbcf53809c.jpg

表4-2 展厅重建实验设置与结果分析

3城市级重建

基于无人机航拍、车载街景采集等多源数据,高效构建数字孪生城市所需的高精度三维模型,可广泛应用于城市规划、交通管理、应急指挥等领域,有助于提升城市治理的科学化、精细化和智能化水平,助力数字孪生城市的建设与可持续发展。

fa843250-5016-11f0-b715-92fbcf53809c.jpg

表4-3 城市重建实验设置与结果分析

五、结论展望

随着AI感知技术和边缘计算的持续发展,实景三维重建技术正变得更加高效、智能和实时。作为新一代三维表示方法,3DGS以其轻量高保真、渲染高效、适配多终端等优势,有望成为实景三维重建的主流技术,为数字展品、虚拟展厅、孪生城市、元宇宙等新兴应用提供有力支撑。

未来,航天宏图将持续深耕3DGS核心技术,重点方向包括:融合激光雷达等多源数据,提升重建精度;结合大语言模型,实现智能化的三维场景交互;积极拓展AR/VR自动驾驶等新兴领域的创新应用,推动3DGS技术在各行业的深入应用,为“实景三维中国”建设贡献更大力量。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 3D
    3D
    +关注

    关注

    9

    文章

    2993

    浏览量

    113863
  • 模型
    +关注

    关注

    1

    文章

    3649

    浏览量

    51719
  • 三维建模
    +关注

    关注

    0

    文章

    41

    浏览量

    4025
  • 航天宏图
    +关注

    关注

    0

    文章

    145

    浏览量

    9110

原文标题:基于3D高斯溅射的实景三维重建

文章出处:【微信号:MzA3MjAyNTI5MQ==,微信公众号:航天宏图】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    怎样去设计一种基于RGB-D相机的三维重建无序抓取系统

    为什么要开发一种三维重建无序抓取系统三维重建无序抓取系统是由哪些部分组成的?三维重建无序抓取系统
    发表于 07-02 06:29

    如何去开发一款基于RGB-D相机与机械臂的三维重建无序抓取系统

    基于RGB-D相机与机械臂的三维重建无序抓取系统有哪些关键技术?如何去开发一款基于RGB-D相机与机械臂的三维重建无序抓取系统?基于RGB-D相机与机械臂的
    发表于 09-08 06:12

    无人机三维建模的信息

    项目需要调研一下无人机三维建模的信息无人机三维建模核心技术是三维重建,或者说基于图片的建模(Image-Based Modeling)。项目需要是建立园区的三维模型,其他应用上可以用于
    发表于 09-16 06:55

    基于FPGA的医学图像三维重建系统设计与实现

    目前大部分的医学图像三维重建过程都是在PC机上完成的,由于PC机本身性能的限制和重建算法的复杂性,使得重建效率不高。针对这个问题,设计与实现了一个基于FPGA(Field Programmable Gate Array,现场可编
    发表于 03-15 13:52 45次下载

    透明物体的三维重建研究综述

    透明物体的三维重建一直以来都被认为是很有挑战性的问题。不同于传统重建算法对物体表面的漫反射属性假设,因为透明物体与光线之间存在复杂的,如反射和折射等,与视角相关的光学效应,将导致传统重建算法无法直接
    发表于 04-21 14:21 4次下载
    透明物体的<b class='flag-5'>三维重建</b>研究综述

    基于分布传感的实时三维重建系统

    基于分布传感的实时三维重建系统
    发表于 06-25 11:25 15次下载

    嵌入双目视觉系统三维重建技术研究

    嵌入双目视觉系统三维重建技术研究(嵌入开发方向)-该文档为嵌入双目视觉系统
    发表于 07-30 11:50 7次下载
    嵌入<b class='flag-5'>式</b>双目视觉<b class='flag-5'>系统</b>和<b class='flag-5'>三维重建</b>技术研究

    NVIDIA Omniverse平台助力三维重建服务协同发展

    计算机视觉的进步为元宇宙的数字孪生应用打下坚实基础。在计算机视觉中,三维重建是指根据单视图或者多视图的图像重建三维信息的过程。数字孪生开发者可借助三维重建服务,加速
    的头像 发表于 10-13 09:45 1931次阅读

    深度学习背景下的图像三维重建技术进展综述

    根据三维模型的表示形式可以将图像三维重建方法分类为基于体素的三维重建、基于点云的三维重建和基于网格的三维重建,其中基于网格的
    的头像 发表于 01-09 14:26 3656次阅读

    三维重建:从入门到入土

    经典三维重建系统的整个pipeline从相机标定、基础矩阵与本质矩阵估计、特征匹配到运动恢复结构(SFM),从SFM到稠密点云重建、表面重建、纹理贴图。熟悉SFM的工程师已经是行业内的
    的头像 发表于 03-03 10:17 1924次阅读

    如何实现整个三维重建过程

    在计算机视觉中,三维重建是指根据单视图或者多视图的图像重建三维信息的过程。由于单视频的信息不完全,因此三维重建需要利用经验知识,而多视图的三维重建
    发表于 09-01 11:06 2517次阅读
    如何实现整个<b class='flag-5'>三维重建</b>过程

    基于光学成像的物体三维重建技术研究

    随着计算机科学和数字成像技术的飞速发展,光学成像技术在许多领域中得到了广泛应用,其中之一便是物体三维重建。物体三维重建技术是一种通过计算机处理图像数据,获得物体三维信息的技术。光学成像技术作为物体
    的头像 发表于 09-15 09:29 1586次阅读
    基于光学成像的物体<b class='flag-5'>三维重建</b>技术研究

    南方测绘推出实景三维中国整体解决方案

    新型基础测绘与实景三维中国建设持续推进,南方测绘深度聚焦,基于自主研发的SmartGIS平台,打造以地理实体数据为核心的“生产、处理、质检、管理、可视化分析”实景三维系列产品,提供
    的头像 发表于 03-26 16:44 1061次阅读

    直播邀约 | 10月21日15点,从三维重构到仿真革新:3DGS技术解析与实践应用!

    概述在智能驾驶仿真追求高精度与高效落地的关键阶段,3DGaussianSplatting(3DGS)技术凭借其独特的三维重构优势,已成为突破行业技术瓶颈、推动仿真革新的核心力量!你是否正面
    的头像 发表于 10-14 17:32 877次阅读
    直播邀约 | 10月21日15点,从<b class='flag-5'>三维</b>重构到仿真革新:<b class='flag-5'>3DGS</b>技术解析与实践应用!

    从“重建”到“可用”:aiSim3DGS方案如何闭环自动驾驶仿真场景?

    3DGaussianSplatting(3DGS)凭借高效渲染与逼真场景还原能力,逐渐成为三维重建与仿真领域的焦点。然而,实际应用中,如何将多源异构数据高效转化为可用的3DGS场景,如
    的头像 发表于 10-24 17:33 28次阅读
    从“<b class='flag-5'>重建</b>”到“可用”:aiSim<b class='flag-5'>3DGS</b><b class='flag-5'>方案</b>如何闭环自动驾驶仿真场景?