该论文旨在解决当前室内三维重建技术存在的几个关键问题:
- 无法反映场景细微变化而需要完全重新采集
- 缺乏对场景的语义理解
- 纹理贴图质量不佳影响三维模型的视觉真实感
- 这些问题限制了其在增强现实(AR)、虚拟现实(VR)、室内设计和房地产等领域的应用效果
论文提出了RoomRecon系统,这是一个交互式、实时的移动端三维房间模型扫描与纹理重建流程:
- 采用两阶段纹理重建管道(two-phase texturing pipeline)
- 集成AR引导的图像采集技术(AR-guided image capturing)用于纹理获取
- 利用生成式人工智能模型(generative AI models)提升纹理质量
- 专注于墙壁、地板、天花板等永久性房间元素,使模型易于定制
论文的核心创新点包括:
- 首次在移动设备上实现高质量纹理房间布局重建的完整流程
- 创新的两阶段纹理管道,结合AR引导采集与生成式AI增强,显著提升纹理真实感
- 专注于永久性结构元素的策略,使模型既保持高质量又具备高度可定制性
- 实现了实时交互式扫描与纹理重建,在设备端计算时间上优于现有方法
论文对该领域的整体贡献体现在:
- 提出了一个端到端的移动端高质量纹理房间重建系统RoomRecon
- 通过定量实验和用户研究验证了方法在纹理质量和设备端计算时间上优于当前最先进方法
- 为AR/VR应用提供了更真实、可定制的室内三维模型生成方案
- 推动了语义感知的室内重建技术发展,具有实际应用价值