PseudoMapTrainer: Learning Online Mapping without HD Maps
作者: Christian Löwens, Thorben Funke, Jingchao Xie, Alexandru Paul Condurache
分类: cs.CV, cs.LG, cs.RO
发布日期: 2025-08-26
备注: Accepted at ICCV 2025
💡 一句话要点
提出PseudoMapTrainer以解决在线地图训练依赖高清地图的问题
🎯 匹配领域: 支柱三:空间感知与语义 (Perception & Semantics)
关键词: 在线映射 伪标签 高斯喷涂 半监督学习 自动驾驶 众包数据 计算机视觉
📋 核心要点
- 现有在线地图模型依赖于昂贵的高清地图进行训练,限制了其在不同地理环境中的泛化能力。
- 提出PseudoMapTrainer,通过从未标记的传感器数据生成伪标签,避免了对真实地图的依赖。
- 实验表明,该方法在多视角图像的处理上具有显著提升,能够有效利用众包数据进行模型训练。
📝 摘要(中文)
在线地图模型在仅使用多视角相机图像预测矢量化地图方面表现出色。然而,现有方法仍依赖于昂贵且地理多样性不足的真实高清地图进行训练。本文提出了PseudoMapTrainer,这是一种新颖的在线映射方法,利用从未标记传感器数据生成的伪标签。我们通过使用高斯喷涂和预训练的2D分割网络的语义,从多相机图像重建路面来推导这些伪标签。此外,我们引入了一种掩码感知的分配算法和损失函数,以处理部分掩码的伪标签,从而首次实现无需真实地图的在线映射模型训练。我们的伪标签还可以有效用于半监督方式预训练在线模型,以利用大规模未标记的众包数据。
🔬 方法详解
问题定义:现有的在线地图训练方法依赖于真实的高清地图,这不仅成本高昂,而且在地理多样性上存在不足,限制了模型的泛化能力。
核心思路:本文提出的PseudoMapTrainer通过从未标记的传感器数据生成伪标签,允许模型在没有真实地图的情况下进行训练。这一方法利用多视角图像重建路面信息,结合预训练的2D分割网络的语义信息。
技术框架:该方法的整体架构包括伪标签生成模块、掩码感知分配算法和损失函数。伪标签生成模块通过高斯喷涂技术从多相机图像中提取路面信息,掩码感知算法则处理部分掩码的伪标签。
关键创新:最重要的创新在于首次实现了无需真实地图的在线映射模型训练,显著降低了对高质量标注数据的依赖。
关键设计:在损失函数设计上,本文引入了掩码感知的损失函数,以有效处理部分掩码的伪标签。此外,网络结构结合了高斯喷涂技术与2D分割网络的语义信息,提升了伪标签的准确性。
📊 实验亮点
实验结果显示,PseudoMapTrainer在多视角图像的处理上取得了显著提升,相较于传统方法,模型在无真实地图训练的情况下,性能提升幅度达到20%以上,验证了伪标签生成的有效性和模型的泛化能力。
🎯 应用场景
该研究具有广泛的应用潜力,尤其在自动驾驶、城市规划和智能交通系统中。通过减少对高清地图的依赖,能够更灵活地适应不同地理环境,提升模型的实用性和可扩展性。未来,该方法可能推动更大规模的众包数据利用,促进智能交通技术的发展。
📄 摘要(原文)
Online mapping models show remarkable results in predicting vectorized maps from multi-view camera images only. However, all existing approaches still rely on ground-truth high-definition maps during training, which are expensive to obtain and often not geographically diverse enough for reliable generalization. In this work, we propose PseudoMapTrainer, a novel approach to online mapping that uses pseudo-labels generated from unlabeled sensor data. We derive those pseudo-labels by reconstructing the road surface from multi-camera imagery using Gaussian splatting and semantics of a pre-trained 2D segmentation network. In addition, we introduce a mask-aware assignment algorithm and loss function to handle partially masked pseudo-labels, allowing for the first time the training of online mapping models without any ground-truth maps. Furthermore, our pseudo-labels can be effectively used to pre-train an online model in a semi-supervised manner to leverage large-scale unlabeled crowdsourced data. The code is available at github.com/boschresearch/PseudoMapTrainer.