StableGS: A Floater-Free Framework for 3D Gaussian Splatting

📄 arXiv: 2503.18458v3 📥 PDF

作者: Luchao Wang, Qian Ren, Kaimin Liao, Hua Wang, Zhi Chen, Yaohua Tang

分类: cs.CV, cs.CL

发布日期: 2025-03-24 (更新: 2025-08-04)

💡 一句话要点

StableGS：提出一种无浮动伪影的3D高斯溅射框架，提升几何和视觉保真度。

🎯 匹配领域: 支柱三：空间感知与语义 (Perception & Semantics)

关键词: 3D高斯溅射 三维重建 浮动伪影 几何正则化 双重不透明度 深度一致性 全局尺度优化

📋 核心要点

  1. 3D高斯溅射重建易受浮动伪影影响，导致几何和视觉质量下降，现有方法难以有效解决。
  2. StableGS通过解耦几何正则化和外观渲染，利用双重不透明度架构和几何约束，实现更稳定的优化。
  3. 实验结果表明，StableGS能有效消除浮动伪影，并在几何精度和视觉质量上达到当前最佳水平。

📝 摘要（中文）

3D高斯溅射(3DGS)重建受到顽固的“浮动”伪影的影响，降低了几何和视觉保真度。我们首次揭示了根本原因：3DGS优化过程中存在一个根本冲突，即当浮动元素的混合颜色达到一个伪平衡状态，抵消了与背景之间的误差时，其不透明度梯度会消失，从而将它们困在虚假的局部最小值中。为了解决这个问题，我们提出了StableGS，这是一个新颖的框架，它将几何正则化与最终外观渲染解耦。其核心是双重不透明度架构，它创建了两个独立的渲染路径：“几何正则化路径”，用于承受基于深度的强约束以实现结构正确性；以及“外观细化路径”，用于在此稳定基础上生成高保真细节。我们通过一组协同的几何约束来补充这一点：一种自监督的深度一致性损失和一种由我们高效的全局尺度优化算法启用的外部几何先验。在多个基准测试上的实验表明，StableGS不仅消除了浮动伪影，还解决了常见的模糊-伪影权衡问题，实现了最先进的几何精度和视觉质量。

🔬 方法详解

问题定义：论文旨在解决3D高斯溅射(3DGS)重建中普遍存在的“浮动”伪影问题。这些伪影降低了重建的几何精度和视觉质量。现有方法的痛点在于，3DGS优化过程中存在一个根本冲突：当浮动元素的混合颜色达到一个伪平衡状态时，其不透明度梯度会消失，导致其陷入局部最优，难以消除。

核心思路：StableGS的核心思路是将几何正则化与最终外观渲染解耦。通过这种解耦，可以分别对几何结构和外观细节进行优化，避免了两者之间的相互干扰。具体来说，StableGS使用双重不透明度架构，分别用于几何正则化和外观细化。

技术框架：StableGS的整体框架包含两个主要的渲染路径：几何正则化路径和外观细化路径。几何正则化路径负责利用基于深度的强约束来保证结构的正确性。外观细化路径则负责在稳定的几何基础上生成高保真度的细节。此外，StableGS还包含一个高效的全局尺度优化算法，用于启用外部几何先验。

关键创新：StableGS最重要的技术创新点在于其双重不透明度架构，它将几何正则化和外观渲染解耦。这种解耦允许对几何结构和外观细节进行独立优化，避免了传统方法中两者之间的相互干扰，从而有效消除了浮动伪影。与现有方法相比，StableGS能够更好地平衡几何精度和视觉质量。

关键设计：StableGS的关键设计包括：1) 双重不透明度架构，包含几何正则化路径和外观细化路径；2) 自监督的深度一致性损失，用于约束几何结构的准确性；3) 基于高效全局尺度优化算法的外部几何先验，进一步提升几何精度。具体的损失函数和参数设置在论文中有详细描述，例如深度一致性损失的权重等。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

实验结果表明，StableGS在多个基准测试上均取得了最先进的性能。与现有方法相比，StableGS不仅有效消除了浮动伪影，还解决了常见的模糊-伪影权衡问题。在几何精度和视觉质量方面均有显著提升，例如在特定数据集上，几何精度提升了XX%，视觉质量指标提升了YY%。

🎯 应用场景

StableGS在三维重建领域具有广泛的应用前景，可用于城市建模、虚拟现实、自动驾驶等场景。通过消除浮动伪影，StableGS能够提升三维重建的几何精度和视觉质量，从而改善用户体验，并为下游任务提供更可靠的数据基础。未来，该技术有望应用于文物保护、医疗影像分析等领域。

📄 摘要（原文）

3D Gaussian Splatting (3DGS) reconstructions are plagued by stubborn floater" artifacts that degrade their geometric and visual fidelity. We are the first to reveal the root cause: a fundamental conflict in the 3DGS optimization process where the opacity gradients of floaters vanish when their blended color reaches a pseudo-equilibrium of canceling errors against the background, trapping them in a spurious local minimum. To resolve this, we propose StableGS, a novel framework that decouples geometric regularization from final appearance rendering. Its core is a Dual Opacity architecture that creates two separate rendering paths: aGeometric Regularization Path" to bear strong depth-based constraints for structural correctness, and an ``Appearance Refinement Path" to generate high-fidelity details upon this stable foundation. We complement this with a synergistic set of geometric constraints: a self-supervised depth consistency loss and an external geometric prior enabled by our efficient global scale optimization algorithm. Experiments on multiple benchmarks show StableGS not only eliminates floaters but also resolves the common blur-artifact trade-off, achieving state-of-the-art geometric accuracy and visual quality.