CoherentRaster: Efficient 3D Gaussian Splatting for Light Field Displays
作者: Gyujin Sim, Seungjoo Shin, Hosung Jeon, Gwangsoon Lee, Hyon-Gon Choo, Sunghyun Cho
分类: cs.GR
发布日期: 2026-05-06
💡 一句话要点
CoherentRaster:面向光场显示的高效3D高斯溅射渲染
🎯 匹配领域: 支柱三:空间感知与语义 (Perception & Semantics)
关键词: 光场显示 3D高斯溅射 实时渲染 亚像素光栅化 跨视角相干性 视角相干重映射 GPU加速
📋 核心要点
- 光场显示渲染需要处理大量视角相关数据,传统方法计算开销大,难以实现实时渲染。
- CoherentRaster通过跨视角相干属性重用和视角相干重映射,减少冗余计算并提升内存效率。
- 该方法在消费级硬件上实现了实时、高质量的光场合成,验证了其高效性。
📝 摘要(中文)
光场显示器(LFDs)需要渲染交错图像,该图像编码了许多视角相关的观测。这种多视角需求带来了巨大的计算开销,使得实时渲染难以实现。虽然3D高斯溅射(3DGS)对于2D显示器上的单视角渲染是有效的,但直接将其扩展到LFDs在计算上是昂贵的。此外,先前的加速方法要么在空间非相干的亚像素布局下遭受GPU效率低下,要么依赖于计算量大的多平面中间表示。在本文中,我们提出CoherentRaster,一个基于3DGS的光场渲染框架,它执行亚像素级别的光栅化。我们的方法采用跨视角相干属性重用,以消除相邻视点之间的冗余计算,并应用视角相干重映射,以恢复由交错亚像素布局降低的warp级别内存效率。总之,CoherentRaster提供了一个高效的流水线,用于在消费级硬件上进行实时、高质量的光场合成。
🔬 方法详解
问题定义:论文旨在解决光场显示中实时渲染的问题。现有方法,特别是直接扩展3D高斯溅射到光场显示,计算成本过高。此外,已有的加速方法要么在亚像素布局下GPU效率低,要么依赖于计算密集的多平面中间表示,无法满足实时性需求。
核心思路:论文的核心思路是利用光场中相邻视点之间的相干性,减少冗余计算,并优化内存访问模式。通过跨视角相干属性重用,避免重复计算相邻视点的属性。通过视角相干重映射,解决因交错亚像素布局导致的内存效率下降问题。
技术框架:CoherentRaster是一个基于3DGS的光场渲染框架,包含以下主要阶段:1) 3D高斯表示的初始化和优化;2) 亚像素级别的光栅化;3) 跨视角相干属性重用;4) 视角相干重映射;5) 最终图像合成。该框架旨在实现高效的光场渲染流水线。
关键创新:论文的关键创新在于提出了跨视角相干属性重用和视角相干重映射两种技术。跨视角相干属性重用通过重用相邻视点的属性,减少了冗余计算。视角相干重映射通过重新组织内存访问模式,提高了warp级别的内存效率,从而克服了交错亚像素布局带来的性能瓶颈。
关键设计:论文在实现跨视角相干属性重用时,需要确定哪些属性可以在相邻视点之间安全地重用,以及如何有效地管理这些属性的重用。在视角相干重映射中,关键在于设计合适的重映射策略,以最大程度地提高内存访问的连续性。具体的参数设置和损失函数等细节在论文中进行了详细描述,以保证渲染质量和效率。
🖼️ 关键图片
📊 实验亮点
CoherentRaster在消费级硬件上实现了实时、高质量的光场合成。实验结果表明,该方法显著优于现有的光场渲染方法,在保证渲染质量的同时,大幅提升了渲染速度。具体的性能数据和对比基线在论文中进行了详细的展示。
🎯 应用场景
该研究成果可广泛应用于光场显示、虚拟现实、增强现实等领域。通过提供高效的光场渲染方法,可以提升用户在这些应用中的沉浸感和交互体验。未来,该技术有望推动光场显示设备的普及,并促进相关产业的发展。
📄 摘要(原文)
Light field displays (LFDs) require rendering an interlaced image that encodes many view-dependent observations. This multi-view requirement introduces substantial computational overhead, making real-time rendering difficult to achieve. While 3D Gaussian Splatting (3DGS) is efficient for single-view rendering on 2D displays, directly extending it to LFDs is computationally expensive. Moreover, prior accelerations either suffer from GPU inefficiency under spatially incoherent subpixel layouts or rely on computationally heavy multi-plane intermediates. In this paper, we propose CoherentRaster, a 3DGS-based light field rendering framework that performs subpixel-level rasterization. Our method employs Cross-view Coherent Attribute Reuse to eliminate redundant computation across neighboring viewpoints and applies View-coherent Remapping to restore warp-level memory efficiency degraded by the interlaced subpixel layout. Together, CoherentRaster provides an efficient pipeline for real-time, high-quality light field synthesis on consumer-grade hardware.